成蹊2013
- 日本語・日本文学を学んでいくうえでぜひ身につけておきたいコンピュータに関する知識・技術を学びます。
- 前期4限
- 7号館3階 301パソコン教室
- ogiso＠ogiso.net ←＠を@に直してください
2013/07/12 レポートテーマに関する調査
- 各自のレポートテーマ（先週のものから変えても可）について調査してください。
- 個別に見て回ります。積極的に質問してください。
- 注意
- パソコン・ネットだけでは十分な調査はできません。図書館を利用してください。（参考文献は明記すること）
- 最低限『日本国語大辞典』等のしっかりした辞典にあたっておくこと。
Wordでレポートを書く
- 文書の構造化
- スタイルと見出し
- ナビゲーション ウィンドウ（見出しマップ）の使い方
- 章・節番号
- 図表の貼り込み
- 「形式を選択して貼り付け」
- 図表番号とキャプション
- 脚注
- 相互参照
2013/07/05 レポートテーマの検討
- 各自のレポートテーマを確認します。
- 各自のレポートテーマについて調査してください。
- 2年生を中心に見て回ります。
現代語コーパスとの比較
- 「現代日本語書き言葉均衡コーパス（BCCWJ）」『少納言』
調整頻度の計算
- 作家ごと、年ごとに文章量が大きく違うので、調整頻度に直して比較する
- 語数はわからないので文字数を使う（たとえば10000文字当たり何回出現するか）
ひまわりで利用可能なデータについて†
- 国会会議録データ
- Web Collaboration : /temporary/ogiso/Himawari_kokkai.zip
- 青空文庫・国会会議録以外のデータ紹介
- 現代語のデータ
- 古典文学作品のデータ
- 近代語のデータ
- 太陽コーパス
- 近代情勢雑誌コーパス
- 明六雑誌コーパス
- 国定高等小学読本
ひまわりの使い方補足
2013/06/28 Excelを使った集計
- （補足）検索結果の貼り付け前に生年月日が入る列を選択し、書式を「文字列」としておく
- 「青空文庫」データの作品ごとに不揃いな生年月日が日付への自動変換でおかしくなるのを防ぐため
ひまわりの検索結果をピボットテーブルで集計（続き）
- サンプリング調査
- 大量に用例があり、調査内容からすべて対象にできない場合
- ランダムに並べ替え→先頭n例を調査対象に
- ランダムな数字の列： =rand()
- ランダムな数字の列をコピーして値として貼り付けると数字が固定される
関数の利用
- 文字列処理関数
- 例： =left(<文字列>,<文字数>)
- 生年代： =left(<生年月日が入っているセル>,3)*10
レポートについて
2013/06/21 ひまわりとExcel
検索結果をExcelで扱う†
- 列名
| 前文脈 | キー | 後文脈 | 作品名 | 副題 | 著者 | 役割 | 初出 | 分類番号 | 文字遣い | 作品ID | 人物ID | 生年月日 | 没年月日 | 文字数 | メモ１ | メモ２ |
覚えるべきExcelの基本操作
- 並べ替え（ソート）
- フィルター（絞り込み）
- テキストフィルター
- 多重フィルター（複数の条件指定）
- ピボットテーブル★
レポートテーマについて(予告)†
- 授業で紹介したエディタや表計算ソフトの使い方を活かして、たとえば次のようなテーマでレポートをまとめてもらいます。データは授業で配布したものを自由に利用してください。
- 例：作家ごとの言葉の使い方の違い
- 例：類義語の意味の違い
- 例：語の用法の変化
- 例：語形・（表記）のゆれ
- などなど
2013/06/14
前回小テスト解説
「ひまわり」の準備・動作確認
- Web Collaboration : /temporary/ogiso/
「ひまわり」とその使い方
2013/06/07
全文検索システム「ひまわり」について
「ひまわり」利用の準備
- Web Collaboration : /temporary/ogiso/
- 動作確認
小テスト：エディタと正規表現
- テスト前にsoseki2.zipを検索可能にしておくこと
2013/05/30
タグ付き正規表現・つづき
^(.*?,.*?,.*?,)(.*?,)(読[まみむめもん],)(.+,)(読[まみむめもん])(,.+)
↓
\1\2\3\4\n\1\4\5\6
検索文字列の中での後方参照†
- 検索語の中で\1を使う
- (..)\1 「ころころ」「毎日毎日」など二文字の繰り返しにマッチ
- (.ろ)\1 「ころころ」「どろどろ」「へろへろ」などにマッチ
最長一致の原則（greedy matching）†
- 正規表現は、パターンが一致する最も長い範囲にマッチする
- 例：あ+ → 【\1】
- ああああああああ → 【ああああああああ】
そのせいで…
- 例：「(.+)」 → 【\1】
- 「こんにちは」「さようなら」 → 【こんにちは」「さようなら】
- 括弧の組ごとに置換するためには「([^」]+)」 → 【\1】 のように書かなければならない
- 「こんにちは」「さようなら」 → 【こんにちは】【さようなら】
- よりかんたんに指定するには（最短一致，ものぐさ指定）
- 「(.+?)」「(.*?)」のように、繰り返し指定の+*の後に「?」をつける
正規表現に関する参考資料†
#amazon(4873114500)
#amazon(4873113598)
質問受付
2013/05/17
（復習）正規表現のいろいろ
- 授業資料/正規表現
- 文字クラス [ ]
- 文字クラスの否定（補集合）[^ ]
- 繰り返し ? + *
- グループ化 ()
- or（論理和） |
- 文頭 ^、文末 $ 【New】
正規表現の応用†
- カタカナ語
- 送りがなの揺れ（行う／行なう）
- 会話文中（"「"で始まる文中）の用例を検索する
- 同一文中での共起 全然～ない。
タグ付き正規表現
- 走[らりるれろ] でgrepした結果を置換するにはどうしたらいいか
- 次のように置換するととんでもないことに…
- 検索文字列：走[らりるれろっ]
- 置換文字列：★走[らりるれろっ]
- タグ付き正規表現・カッコ（半角丸カッコ）と\1（\2，\3…）を使う
- 授業資料/タグつき正規表現
2013/05/10 正規表現
- 今日の練習用テキストデータ
- Web Collaboration : /temporary/ogiso/
- soseki2.zip （前回のデータからルビと不要箇所を削除し、一文ずつ改行する形に変えたもの）
テキストエディタの復習
正規表現を使ってみる†
- キャラクタクラス
- 例：読[まみむめもん]
- 半角ブラケットの中に文字を並べる→並べた文字いずれか1文字
正規表現とは†
- 正規表現 ＞用語
- 文字を表すための特殊な文字（メタ文字）を使って文字列のパターンを表現する
- エディタでは置換・検索・grepで利用できる （エディタ以外にもさまざまなアプリケ－ションやコンピュータ言語で利用されている）
- 記号はすべて半角
- 記号そのものを表す場合には\でエスケープする（特殊な意味を打ち消す） 例：1\+2
正規表現のいろいろ†
- 授業資料/正規表現
- 文字クラス [ ]
- 文字クラスの否定（補集合）[^ ]
- 繰り返し ? + *
- グループ化 ()
- or（論理和） |
- 文頭 ^、文末 $
2013/04/26 テキストエディタの利用
- テキストデータ（青空文庫）の配布
- Web Collaboration : /temporary/ogiso/
- soseki.zip （今日の授業で使います）
- aozoradoc2.zip
- ダウンロードしてUSBメモリに展開（解凍）します
- 検索・置換、grep
- 検索で初出行を調べる
- 置換で用例数を数える
- grepで用例リストを作る
- タグジャンプで文脈を確認する
- サブフォルダのgrep
ショートカットキー†
grepと置換でKWIC(CSVファイル)を作る（簡易版）†
- CSVファイルとは：テキストファイルで表を表現する
用語：CSVファイル
- KWIC：KeyWord In Context
2013/04/19 テキストデータとテキストエディタ
- USBメモリの準備
- 次回の授業からUSBメモリを使います。2G（なるべく4G）以上の空きのあるUSBメモリを用意してください。
テキストデータ
- すべての基本、文字が並ぶだけのデータ
- TXT,CSV,HTM・・・
テキストエディタ†
- テキストエディタの設定
- 行の折り返し
- 行番号表示
- スタイル行番号（ワープロ的行番号）と論理行番号（エディタ的行番号）
2013/04/12 イントロダクション
- デモ
- テキストエディタとgrep
- 全文検索システムひまわり
- 形態素解析：茶まめ／MeCab+UniDic
授業で利用する主なソフトウェア†
![[PukiWiki]](image/pukiwiki.png "[PukiWiki]")
