[[成蹊2013]]

-日本語・日本文学を学んでいくうえでぜひ身につけておきたいコンピュータに関する知識・技術を学びます。
-後期・金曜4限
//-7号館3階 301パソコン教室
-ogiso@ogiso.net ←@を@に直してください

-BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]]
-[[Web Collaborartion System>https://web.cc.seikei.ac.jp/]]


//**注意

//-残り授業日
//--12/13, 12/20(休講), 2014/1/10,1/17

-''レポート締切:1月27日''
--メールでogiso@ogiso.net ←@を@に直してください に送ってください。

**2014/1/17

***レポート作成と質問
***レポート作成と質問(最終回)


***Wordを使ってレポートを書く
-図表の取り扱い
--「形式を選択して貼り付け」
--図表番号、キャプション
-文書の構造化
--章・節番号
--「スタイル」「ナビゲーション ウィンドウ」(見出しマップ)の活用
-節番号、図表番号と相互参照
-目次、図表目次


**2014/1/10

***レポート作成のためのコーパス検索・調査(2)

-考えてきたテーマについて、実際に用例を検索してレポート作成の準備を進めます。
-積極的に質問して下さい。


**2013/12/20
-2013年12月20日(金曜日)の授業は休講です。
-レポートテーマについて検討を進めておいてください。

**2013/12/13

***補足
-複数の検索結果表をまとめる
--2回分の検索結果を一つのピボットテーブルで集計するには
-自分で情報を追加して集計に使う
--自分で追加した列をピボットテーブルで集計するには

--たんぽぽ・ひまわり・すみれ

***レポート作成のためのコーパス検索・調査(1)

-考えてきたテーマについて、実際に用例を検索してレポート作成の準備を進めます。


//
//**2013/12/07
//-''2013年12月7日(土曜日=金曜授業日)の授業は休講です''


**2013/12/06

***BCCWJ利用の落とし穴

-BCCWJはあくまでも「現代語」のためのコーパスなので通時的な調査には向かない
--レジスターによって母集団の年が違っている
---レジスターの偏りを年代の偏りと勘違いしないこと
--30年あるのは白書・ベストセラー・国会会議録など一部のものだけ

-もともとテキスト量の多いレジスターにたくさん用例があるからといって「そのレジスターでよく使われる」とはいえない→調整頻度の計算
--cf.人口あたりの事故件数,1平方キロあたりの…etc.

***調整頻度の計算
-粗頻度を総語数で割る
--レジスターごとの語数データ:中納言ページの「語数について」からExcelでダウンロードできる
---語数ファイルをピボットテーブルで集計して分母に

-調整頻度には100万語あたりの頻度(pmw)が比較的よく使われる
--粗頻度/総語数*1000000
---数字が小さくなりすぎないようにするため

***ランダムサンプリング調査(Excelでの集計・補足)
--大量に用例があり、調査内容からすべて対象にできない場合
--ランダムに並べ替え→先頭n例を調査対象に
---ランダムな数字の列: =RAND() 
---ランダムな数字の列をコピーして「値として貼り付ける」と数字が固定される

***NINJAL LWP for BCCWJの紹介
-http://nlb.ninjal.ac.jp/
-ワードプロファイラー
-語の振る舞いの概略を見るのに手軽で便利
-注意点
--UniDicの見出し語体系でない(=本来のBCCWJではない)
--自動係り受け解析結果は形態素解析以上に誤りが多い


**2013/11/29

***検索の例つづき
-「検索課題」配付資料参照

***形態素解析とUniDic

----

#include(授業資料/形態素解析,notitle)

----

--形態素解析器//[[MeCab>http://mecab.googlecode.com/svn/trunk/mecab/doc/index.html]](Windows用)最新版 [[Download>http://code.google.com/p/mecab/downloads/detail?name=mecab-0.994.exe]]


***授業用UniDic+MeCabパッケージのダウンロード


***茶まめで形態素解析・Excelで集計
+茶まめで解析してみる(解析器はMeCab+解析辞書はUniDic)
+Excelに出力する
+ピボットテーブルで集計する

-テキストのジャンルと語種,品詞の割合をグラフ化してみる
--ブログのテキストと新聞記事のテキストの解析結果を比較

-----


**レポートテーマについて
-次回までにレポートテーマを考えてくること(全員に聞きます)

-普段から見聞きする言葉に気をつけるとともに、図書館も活用すること
-ひとつの言葉から、同種の別の語や違う観点からの観察などへと膨らませていく

***表記
--「雀」「すずめ」「スズメ」動植物名の表記・・・レジスター別用例数、文体差
--「卵」「玉子」「たまご」「タマゴ」・・・意味の違い?文体差?
--「斡旋」「あっ旋」「あっせん」、「石鹸」「石けん」「せっけん」・・・常用漢字表外字を含む漢語の表記の揺れ
***類義語・対義語
--「奇麗」と「美しい」・・・連体修飾する名詞の違い(→意味の違い)
--「うるさい」「やかましい」「さわがしい」「かしましい」「かまびすしい」類義語・・・共起語、文体差
--「男性」と「女性」(「男」と「女」)・・・語彙の非対称性、社会言語学的分析
***語形、語法
--「好ましい」「好もしい」・・・語形の揺れと文体差
--「煙草を吸う」と「煙草をのむ」・・・用例数の割合、「煙草をのむ」の出現条件
***新語・意味変化
--「断トツ」「定番」「夜ご飯」・・・新語の広がり
--「役不足」「確信犯」・・・”誤用”と”正用”


**2013/11/22

***復習
+「中納言」による検索
+Excelでインポート
+ピボットテーブルで集計

***Excelの基礎
-並べ替え
--反転前文脈の使い方
-フィルタ
--テキストフィルタ


***検索の例
-「検索課題」配付資料参照


***補足
-連体修飾(である可能性が高いもの)の検索と集計
-ジップの法則


**2013/11/08

-資料「『中納言』概説・実習」つづき


***検索条件式
 キー: 語彙素 = "奇麗" IN core="true" WITH OPTIONS unit="1" AND tglWords="20" AND tglKugiri="|" AND tglFixVariable="2"

***検索結果をExcelで利用する
-前回資料(4.)参照

***「中納言」検索結果のダウンロードとExcelでの利用
+ダウンロード
+アーカイブの展開(解凍)
+Excelでインポート


***【重要】ピボットテーブルの使い方
-ピボットテーブル
-ピボットグラフ


**2013/11/01

***コーパスの形態論情報
-[[UniDic>http://download.unidic.org]]の品詞体系
-UniDicマニュアル

***学校文法との違い
--品詞:名詞-普通名詞-一般 (大分類>中分類>小分類)
--活用型:下一段-ア行 (大分類>行分類(>小分類))
--可能性に基づく品詞
---名詞-普通名詞-サ変可能
--形状詞 (=形容動詞語幹)
--助動詞「う」が付いた形を意志推量形として扱う
--漢語サ変動詞を名詞(語幹)と動詞(「する」)に分割

***見出し語の階層構造
-語彙素(語彙素読み)
--語形
---書字形

-矢張り(ヤハリ) 32887
--ヤハリ 19876
---やはり 19781
---ヤハリ 0
---矢張り 93
--ヤッパリ
---やっぱり
---ヤッパリ
--ヤッパシ
---やっぱし
---ヤッパシ
--ヤッパ
---やっぱ
---ヤッパ


***形態論情報を活かした検索
-資料「『中納言』概説・実習」(2.)参照


**2013/10/25

-「中納言」契約書を1部返却します。

***日本語コーパスの紹介(2) コーパスの設計とサンプリング
-(スライド参照)
--「バランスがとれている」とは?
--コーパスの母集団の設定とサンプリング
--BCCWJのサブコーパス
--可変長と固定長
-著作権をめぐる問題

-参考リンク
--[[ブラウンコーパス マニュアル>http://khnt.aksis.uib.no/icame/manuals/brown/]] http://khnt.aksis.uib.no/icame/manuals/brown/
--[[BNCリファレンスガイド>http://www.natcorp.ox.ac.uk/docs/URG/]] http://www.natcorp.ox.ac.uk/docs/URG/

--[[現代日本語書き言葉均衡コーパスの基本方針>http://www.ninjal.ac.jp/kotonoha/ex_2.html]]
--[[現代日本語書き言葉均衡コーパスのためのサンプル抽出>http://www.ninjal.ac.jp/kotonoha/ex_3.html]]



**2013/10/11


***日本語コーパスの紹介(1)コーパスとはどんなものか

-''(スライド参照)''

:狭義のコーパス|言語研究を目的として収集され、言語研究のための情報が付けられたコンピュータ上で利用可能な大規模な言語データ。
:広義のコーパス|コンピュータ上で利用可能な大規模な言語データ。必ずしも言語研究向きではないが、言語研究にも利用可能。
-この授業で扱うのは狭義のコーパス。中でも「現代日本語書き言葉均衡コーパス(BCCWJ)」
--もうひとつの授業「日本語日本文学のためのコンピュータ」で扱っているデータは後者

-日本語コーパス以前のデータとBCCWJの違いは


**2013/10/04

***「中納言」利用申込み
-申込用紙を配布します。押印して次回、必ず持ってきてください。

***現代日本語書き言葉均衡コーパス(BCCWJ)とは
-BCCWJについて、まず最小限のことを説明します。
--来週以降、詳しく説明します。

-[[BCCWJ少納言>http://shonagon.ninjal.ac.jp]]
--登録不要
--文字列検索のみ
--500例まで表示
-[[BCCWJ中納言>http://chunagon.ninjal.ac.jp]]
--要登録
--形態論情報を使った検索
--全件(一度に最大10万例まで)ダウンロード可


***「中納言」を使ってみる
-詳しい説明を後回しにして、とにかく「中納言」を使ってみましょう。
-ログイン方法、インターフェイスの使い方を確認してください。

-配付資料「中納言の使い方」参照

**2013/09/27
***イントロダクション

-[[自己紹介]]
--大学共同利用機関法人人間文化研究機構 国立国語研究所 http://www.ninjal.ac.jp/
-コーパスとは
---[[国立国語研究所コーパス開発センター>http://www.ninjal.ac.jp/corpus_center/]]
---[[形態素解析辞書UniDic>http://sourceforge.jp/projects/unidic/]]

-デモ
--BCCWJ[[少納言>http://shonagon.ninjal.ac.jp]]
--BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]]


-シラバス確認
--[[シラバス>http://www.ogiso.net/wiki/index.php?plugin=attach&pcmd=open&file=2013%B9%D6%B5%C1.pdf&refer=%C0%AE%EC%FE2013%2F%C6%FC%CB%DC%B8%EC%B3%D8%B9%D6%B5%C1F]]
--この授業の目的
--授業の進め方
--評価方法

トップ   編集 差分 履歴 添付 複製 名前変更 リロード   新規 一覧 検索 最終更新   ヘルプ   最終更新のRSS