成蹊2011/日本語日本文学のためのコンピュータa
をテンプレートにして作成
開始行:
[[成蹊2011]]
*日本語日本文学のためのコンピュータa
-日本語・日本文学を学んでいくうえでぜひ身につけておきたい...
-後期・金曜4限
-連絡先: seikei@ogiso.net( ←@を半角に置き換えてくださ...
**2012/01/13(最終回) レポート作成
-レポート完成に向けて作業を進めてください。
-積極的に質問してください。
***Wordの基本
-スタイルと見出し
-ナビゲーションウィンドウ(見出しマップ)の使い方
-図表の貼り込み
-図表番号
***レポートの提出方法
Wordファイルをメールに添付して送ること。メール本文・Word...
-提出先:''seikei@ogiso.net'' ←@を半角に置き換えてくだ...
-''〆切:1/27(金)''
-分量:A4用紙3枚以上
**2011/12/23 レポートテーマに関する調査
-各自のレポートテーマ(先週のものから変えても可)について...
-個別に見て回ります。積極的に質問してください。
***相対頻度の計算
--''Himawari版青空文庫・文字数データ''&br;[[Aozora2009GWc...
**2011/12/16 レポートテーマの検討
-各自のレポートテーマを確認します。
-各自のレポートテーマについて調査してください。
-個別に見て回ります。積極的に質問してください。
***現代語コーパスとの比較
-「現代日本語書き言葉均衡コーパス(BCCWJ)」『少納言』
--http://shonagon.ninjal.ac.jp
**2011/12/9 ひまわりとExcel(2)
***ひまわりの検索結果をピボットテーブルで集計(復習)
-分類用のフィールドを作って集計する
--例:「新聞紙」の意味・用法の変化
---ランダム→先頭100
***ひまわりの使い方補足
-ひまわりの検索結果をエディタ(正規表現を使った置換)で加...
-ひまわりの正規表現について([[授業資料/Himawariの正規表...
-ひまわりのキー範囲
***ひまわりで利用可能なデータについて [#p8928529]
-国会会議録データ
--Web Collaboration : /temporary/ogiso/Himawari_kokkai.zip
-青空文庫・国会会議録以外のデータ紹介
-古典文学作品のデータ
***レポートについて
-''レポートテーマ確認(第1回)来週''
**2011/12/02 ひまわりとExcel
***検索結果をExcelで使う [#k187ca82]
-並べ替え(ソート)
-オートフィルタ(絞り込み)
--オートフィルタの「オプション」
--複数の条件指定
-ピボットテーブルとピボットグラフ
|前文脈|キー|後文脈|著者|タイトル|著者ID|生年|没年|原著者...
-文字列処理関数
--例: =left(<文字列>,<文字数>)
***レポートテーマについて(予告)[#cf3cbcf7]
-授業で紹介したエディタや表計算ソフトの使い方を活かして、...
--例:作家ごとの言葉の使い方の違い
--例:類義語の意味の違い
--例:語の用法の変化
--例:語形・(表記)のゆれ
--などなど
**2011/11/25 全文検索システムひまわり
***「ひまわり」とは [#g59679c3]
-「ひまわり」 [[国立国語研究所/言語データベースとソフト...
-ただのテキストファイル(プレーンテキスト)ではなく、XML...
***データの準備
--[[青空文庫>http://http://www.aozora.gr.jp/]](XHTML)デ...
--WebCollaborationからUSBメモリにダウンロード
***ひまわりと正規表現 [#lde4da4e]
-「ひまわり」で使用できる正規表現
--検索語/キー:普通の文字と、文字クラスの一部([あいう]の...
--前文脈/後文脈:ほぼ全ての正規表現
**11月18日 欅祭準備日
**11月11日 海外出張のため休講
**2011/11/04 正規表現の応用・タグ付き正規表現
***正規表現の応用 [#c7a3ea2d]
--カタカナ語
--送りがなの揺れ(行う/行なう)
--''全然~ない。''
--会話文中(''「''で始まる)
-[[授業資料/正規表現]]
--会話文中("「"で始まる文中)の用例を検索する
--同一文中での共起
***タグ付き正規表現
-走[らりるれろ] でGrepした結果を置換するにはどうしたらい...
--次のように置換するととんでもないことに…
---検索文字列:走[らりるれろ]
---置換文字列:★走[らりるれろ]
-タグ付き正規表現・カッコ(半角丸カッコ)と\1(\2,\3…)...
-[[授業資料/タグつき正規表現]]
***タグ付き正規表現の応用
-(参考)タグ付き正規表現の応用:[[grepと置換でKWICを作る...
***最長一致の原則(greedy matching) [#y047e9bd]
-正規表現は、パターンが一致する最も長い範囲にマッチする
--例:''「(.+)」'' → ''【\1】''
---「こんにちは」「さようなら」 → 【こんにちは」「さよう...
--''「([^」]+)」'' → ''【\1】'' のように書けばよい
---「こんにちは」「さようなら」 → 【こんにちは】【さよう...
-最短一致を指定するには(ものぐさ指定)
--''「(.+?)」「(.*?)」''のように、繰り返し指定の+*の後に...
***正規表現に関する参考資料 [#w86de08b]
-サクラエディタの正規表現:http://sakura-editor.sourcefor...
-正規表現に関する本 [[amazonで検索>http://www.amazon.co....
#amazon(4873111706)
#amazon(4873113598)
#clear
***ひまわり
-デモ
-動作チェック
**2011/10/28 正規表現
***復習
-検索で初出行を調べる
-置換で用例数を数える
-grepとタグジャンプ
***正規表現とは [#d216d4e0]
-''正規表現'' [[>用語>http://e-words.jp/w/E6ADA3E8A68FE...
--文字を表すための特殊な文字(メタ文字)
--置換・検索・grepで利用できる
--記号はすべて半角
--特殊文字そのものを表す場合には\でエスケープする(特殊な...
-文字クラス [ ]
--文字クラスの補集合(それ以外の文字)[^ ]
***正規表現のいろいろ [#q514651f]
-[[授業資料/正規表現]]
--文字クラス [ ]
--文字クラスの否定(補集合)[^ ]
--繰り返し ? + *
--グループ化 ()
--or(論理和) |
--文頭 ^、文末 $
**2011/10/20(木) 金曜日不足分授業日 (休講)
-金曜日不足分授業日ですが、都合が付かないため休講とします。
**2011/10/14 テキストエディタの利用
-テキストデータ(青空文庫)の配布
--Web Collaboration : /temporary/ogiso
-検索・置換、grep
--検索で初出行を調べる
--置換で用例数を数える
--grepで用例リストを作る
--タグジャンプで文脈を確認する
***ショートカットキー [#da449f25]
-[[授業資料/覚えておきたいショートカットキー]]
***grepと置換でKWIC(CSVファイル)を作る(簡易版) [#u3ab2d...
-CSVファイルとは:テキストファイルで表を表現する
[[用語:CSVファイル>http://e-words.jp/w/CSV.html]]
-KWIC:KeyWord In Context
***正規表現を使ってみる [#u471d57b]
-キャラクタクラス
--例:読[まみむめもん]
---半角ブラケットの中に文字を並べる→並べた文字いずれか1文字
**2011/10/07 テキストデータとテキストエディタ
-授業ページへのショートカット
-出席のチェック
-USBメモリの準備
***(前回補足)デモンストレーション [#tae8f4ce]
--青空文庫+ひまわり→Excelピボットテーブル
|前文脈|キー|後文脈|著者|タイトル|著者ID|生年|没年|原著者...
***テキストデータ
-すべての基本、文字が並ぶだけのデータ
--[[授業資料/テキストデータとは]]
--バイナリファイルとテキストファイル
-TXT,CSV,HTM・・・
--ファイルの種類と拡張子 参考:[[拡張子辞典>http://www.ji...
--[[拡張子(wikipedia)>http://ja.wikipedia.org/wiki/%E6%8B...
-授業で使うテキストデータ
--[[授業資料/テキストデータ紹介]]
***テキストエディタ [#q7ae852c]
-テキストエディタとはどんなものか
--[[授業資料/テキストエディタ]]
-サクラエディタのダウンロードとインストール
--[[サクラエディタのダウンロード:sakura2.zip>http://home....
---サクラエディタホームページ:http://sourceforge.net/pro...
-テキストエディタの設定
--行の折り返し
--行番号表示
---スタイル行番号(ワープロ的行番号)と論理行番号(エディ...
-練習用サンプルデータ
--[[soseki.zip>http://home.ogiso.net/wiki/pukiwiki.php?pl...
**2011/09/27 ガイダンス
-[[自己紹介]]
--[[国立国語研究所>http://www.ninjal.ac.jp/]]
--国語研コーパスの紹介([[KOTONOHA>http://www.ninjal.ac.j...
--[[BCCWJ少納言>http://shonagon.ninjal.ac.jp/]]
-[[シラバス>http://home.ogiso.net/wiki/pukiwiki.php?plugi...
--この授業の目的
--授業の進め方
--評価方法
-前期の日本語学講義Eとの違い
--できあがったコーパスを利用する(前期) vs. できるだけ自...
***授業で利用する主なソフトウェア [#i06478d2]
|ソフトウェアの種類・名前|利用目的|h
|[[テキストエディタ ''サクラエディタ'' sakura2>http://sou...
|[[全文検索ソフト''ひまわり''>http://www2.ninjal.ac.jp/lr...
|表計算ソフト''Excel''|分析・グラフ作成|
|ワープロ''Word''|「スタイル」を利用したレポート作成|
終了行:
[[成蹊2011]]
*日本語日本文学のためのコンピュータa
-日本語・日本文学を学んでいくうえでぜひ身につけておきたい...
-後期・金曜4限
-連絡先: seikei@ogiso.net( ←@を半角に置き換えてくださ...
**2012/01/13(最終回) レポート作成
-レポート完成に向けて作業を進めてください。
-積極的に質問してください。
***Wordの基本
-スタイルと見出し
-ナビゲーションウィンドウ(見出しマップ)の使い方
-図表の貼り込み
-図表番号
***レポートの提出方法
Wordファイルをメールに添付して送ること。メール本文・Word...
-提出先:''seikei@ogiso.net'' ←@を半角に置き換えてくだ...
-''〆切:1/27(金)''
-分量:A4用紙3枚以上
**2011/12/23 レポートテーマに関する調査
-各自のレポートテーマ(先週のものから変えても可)について...
-個別に見て回ります。積極的に質問してください。
***相対頻度の計算
--''Himawari版青空文庫・文字数データ''&br;[[Aozora2009GWc...
**2011/12/16 レポートテーマの検討
-各自のレポートテーマを確認します。
-各自のレポートテーマについて調査してください。
-個別に見て回ります。積極的に質問してください。
***現代語コーパスとの比較
-「現代日本語書き言葉均衡コーパス(BCCWJ)」『少納言』
--http://shonagon.ninjal.ac.jp
**2011/12/9 ひまわりとExcel(2)
***ひまわりの検索結果をピボットテーブルで集計(復習)
-分類用のフィールドを作って集計する
--例:「新聞紙」の意味・用法の変化
---ランダム→先頭100
***ひまわりの使い方補足
-ひまわりの検索結果をエディタ(正規表現を使った置換)で加...
-ひまわりの正規表現について([[授業資料/Himawariの正規表...
-ひまわりのキー範囲
***ひまわりで利用可能なデータについて [#p8928529]
-国会会議録データ
--Web Collaboration : /temporary/ogiso/Himawari_kokkai.zip
-青空文庫・国会会議録以外のデータ紹介
-古典文学作品のデータ
***レポートについて
-''レポートテーマ確認(第1回)来週''
**2011/12/02 ひまわりとExcel
***検索結果をExcelで使う [#k187ca82]
-並べ替え(ソート)
-オートフィルタ(絞り込み)
--オートフィルタの「オプション」
--複数の条件指定
-ピボットテーブルとピボットグラフ
|前文脈|キー|後文脈|著者|タイトル|著者ID|生年|没年|原著者...
-文字列処理関数
--例: =left(<文字列>,<文字数>)
***レポートテーマについて(予告)[#cf3cbcf7]
-授業で紹介したエディタや表計算ソフトの使い方を活かして、...
--例:作家ごとの言葉の使い方の違い
--例:類義語の意味の違い
--例:語の用法の変化
--例:語形・(表記)のゆれ
--などなど
**2011/11/25 全文検索システムひまわり
***「ひまわり」とは [#g59679c3]
-「ひまわり」 [[国立国語研究所/言語データベースとソフト...
-ただのテキストファイル(プレーンテキスト)ではなく、XML...
***データの準備
--[[青空文庫>http://http://www.aozora.gr.jp/]](XHTML)デ...
--WebCollaborationからUSBメモリにダウンロード
***ひまわりと正規表現 [#lde4da4e]
-「ひまわり」で使用できる正規表現
--検索語/キー:普通の文字と、文字クラスの一部([あいう]の...
--前文脈/後文脈:ほぼ全ての正規表現
**11月18日 欅祭準備日
**11月11日 海外出張のため休講
**2011/11/04 正規表現の応用・タグ付き正規表現
***正規表現の応用 [#c7a3ea2d]
--カタカナ語
--送りがなの揺れ(行う/行なう)
--''全然~ない。''
--会話文中(''「''で始まる)
-[[授業資料/正規表現]]
--会話文中("「"で始まる文中)の用例を検索する
--同一文中での共起
***タグ付き正規表現
-走[らりるれろ] でGrepした結果を置換するにはどうしたらい...
--次のように置換するととんでもないことに…
---検索文字列:走[らりるれろ]
---置換文字列:★走[らりるれろ]
-タグ付き正規表現・カッコ(半角丸カッコ)と\1(\2,\3…)...
-[[授業資料/タグつき正規表現]]
***タグ付き正規表現の応用
-(参考)タグ付き正規表現の応用:[[grepと置換でKWICを作る...
***最長一致の原則(greedy matching) [#y047e9bd]
-正規表現は、パターンが一致する最も長い範囲にマッチする
--例:''「(.+)」'' → ''【\1】''
---「こんにちは」「さようなら」 → 【こんにちは」「さよう...
--''「([^」]+)」'' → ''【\1】'' のように書けばよい
---「こんにちは」「さようなら」 → 【こんにちは】【さよう...
-最短一致を指定するには(ものぐさ指定)
--''「(.+?)」「(.*?)」''のように、繰り返し指定の+*の後に...
***正規表現に関する参考資料 [#w86de08b]
-サクラエディタの正規表現:http://sakura-editor.sourcefor...
-正規表現に関する本 [[amazonで検索>http://www.amazon.co....
#amazon(4873111706)
#amazon(4873113598)
#clear
***ひまわり
-デモ
-動作チェック
**2011/10/28 正規表現
***復習
-検索で初出行を調べる
-置換で用例数を数える
-grepとタグジャンプ
***正規表現とは [#d216d4e0]
-''正規表現'' [[>用語>http://e-words.jp/w/E6ADA3E8A68FE...
--文字を表すための特殊な文字(メタ文字)
--置換・検索・grepで利用できる
--記号はすべて半角
--特殊文字そのものを表す場合には\でエスケープする(特殊な...
-文字クラス [ ]
--文字クラスの補集合(それ以外の文字)[^ ]
***正規表現のいろいろ [#q514651f]
-[[授業資料/正規表現]]
--文字クラス [ ]
--文字クラスの否定(補集合)[^ ]
--繰り返し ? + *
--グループ化 ()
--or(論理和) |
--文頭 ^、文末 $
**2011/10/20(木) 金曜日不足分授業日 (休講)
-金曜日不足分授業日ですが、都合が付かないため休講とします。
**2011/10/14 テキストエディタの利用
-テキストデータ(青空文庫)の配布
--Web Collaboration : /temporary/ogiso
-検索・置換、grep
--検索で初出行を調べる
--置換で用例数を数える
--grepで用例リストを作る
--タグジャンプで文脈を確認する
***ショートカットキー [#da449f25]
-[[授業資料/覚えておきたいショートカットキー]]
***grepと置換でKWIC(CSVファイル)を作る(簡易版) [#u3ab2d...
-CSVファイルとは:テキストファイルで表を表現する
[[用語:CSVファイル>http://e-words.jp/w/CSV.html]]
-KWIC:KeyWord In Context
***正規表現を使ってみる [#u471d57b]
-キャラクタクラス
--例:読[まみむめもん]
---半角ブラケットの中に文字を並べる→並べた文字いずれか1文字
**2011/10/07 テキストデータとテキストエディタ
-授業ページへのショートカット
-出席のチェック
-USBメモリの準備
***(前回補足)デモンストレーション [#tae8f4ce]
--青空文庫+ひまわり→Excelピボットテーブル
|前文脈|キー|後文脈|著者|タイトル|著者ID|生年|没年|原著者...
***テキストデータ
-すべての基本、文字が並ぶだけのデータ
--[[授業資料/テキストデータとは]]
--バイナリファイルとテキストファイル
-TXT,CSV,HTM・・・
--ファイルの種類と拡張子 参考:[[拡張子辞典>http://www.ji...
--[[拡張子(wikipedia)>http://ja.wikipedia.org/wiki/%E6%8B...
-授業で使うテキストデータ
--[[授業資料/テキストデータ紹介]]
***テキストエディタ [#q7ae852c]
-テキストエディタとはどんなものか
--[[授業資料/テキストエディタ]]
-サクラエディタのダウンロードとインストール
--[[サクラエディタのダウンロード:sakura2.zip>http://home....
---サクラエディタホームページ:http://sourceforge.net/pro...
-テキストエディタの設定
--行の折り返し
--行番号表示
---スタイル行番号(ワープロ的行番号)と論理行番号(エディ...
-練習用サンプルデータ
--[[soseki.zip>http://home.ogiso.net/wiki/pukiwiki.php?pl...
**2011/09/27 ガイダンス
-[[自己紹介]]
--[[国立国語研究所>http://www.ninjal.ac.jp/]]
--国語研コーパスの紹介([[KOTONOHA>http://www.ninjal.ac.j...
--[[BCCWJ少納言>http://shonagon.ninjal.ac.jp/]]
-[[シラバス>http://home.ogiso.net/wiki/pukiwiki.php?plugi...
--この授業の目的
--授業の進め方
--評価方法
-前期の日本語学講義Eとの違い
--できあがったコーパスを利用する(前期) vs. できるだけ自...
***授業で利用する主なソフトウェア [#i06478d2]
|ソフトウェアの種類・名前|利用目的|h
|[[テキストエディタ ''サクラエディタ'' sakura2>http://sou...
|[[全文検索ソフト''ひまわり''>http://www2.ninjal.ac.jp/lr...
|表計算ソフト''Excel''|分析・グラフ作成|
|ワープロ''Word''|「スタイル」を利用したレポート作成|
ページ名: