東京外大2016/JapanStudies2
をテンプレートにして作成
開始行:
[[東京外大2016]]
*Japan Studies 2:日本語コーパスの活用
-秋学期・木曜4限
-ogiso@ogiso.net ←@を@に直してください
----
-[[コーパス検索アプリケーション「中納言」 https://chunago...
**アクティブラーニングについて
-次のイベントのうちいずれか2つ以上に参加して報告すること
--11/2 [[語学研究所定例研究会(小木曽)>http://www.tufs....
--12/3 [[第一回 学習者コーパスワークショップ ―学習者コー...
--12/9 [[じんもんこん2016特別講演「言語研究と言語資源」>...
--2017/2/10 [[NINJALチュートリアル「『日本語歴史コーパス...
--2017/3/6-11 [[国語研・言語資源活用週間>http://pj.ninjal...
(今後、これ以外のイベントも紹介します)
**レポートについて
-BCCWJとこの授業で紹介した手法を活用した日本語研究
-〆切:1月26日(木)
-枚数:A4用紙で4枚以上~20枚以下
-メールで提出
**2017/01/19 質問・レポート課題の調査(II)
-レポート作成を念頭に、コーパスを使い検索結果を活用するこ...
-ミニコーパスの作成に関する質問にもお答えします。
-レポート課題のための調査を進めつつ積極的に質問してくださ...
**2017/01/12 質問・レポート課題の調査(I)
-レポート作成を念頭に、コーパスを使い検索結果を活用するこ...
-レポート課題のための調査を進めつつ積極的に質問してくださ...
**2017/01/05 ミニコーパスを作る
***前回補足(ひまわりによる既存のデータの活用)
-ひまわり用データ
--[[近代雑誌のコーパス>http://pj.ninjal.ac.jp/corpus_cent...
--青空文庫 [[ひまわり用「青空文庫」パッケージ>http://www2...
--[[「国会会議録」パッケージ>http://www2.ninjal.ac.jp/lrc...
-インポート機能で自動生成したXMLを修正する
--属性の付与
--設定ファイルの修正
--再インデックス
***形態素解析の利用
インストールと利用のデモ
-MeCab http://taku910.github.io/mecab/
-UniDic https://ja.osdn.net/projects/unidic/
-[[Web茶まめ>http://chamame.ninjal.ac.jp/]]
#amazon(4254516029);
#clear
***テキストの性質に関する古典的な指標とその出し方
-語種比率
-TTR (Type Token Ratio)延べ異なり比
-名詞率
-MVR (Modifier / Verb Ratio)
--[[樺島忠夫, 寿岳章子『文体の科学』1965年>http://iss.ndl...
-平均文長
***形態素解析結果を利用するツール
-CaboCha (文節係り受け解析) https://taku910.github.io/cab...
-ChaKi.net (コーパス管理ツール)https://ja.osdn.net/proj...
-デモ
***テキスト処理のレベルとツール
|~処理|形態素解析(短単位)→|(長単位解析)→|文節係り受け...
|~BCCWJの場合|MeCab(解析器)+UniDic(辞書)→|Comainu→|→...
|~一般向けツール|MeCabなど(解析器)+UniDicなど(辞書)&...
**2016/12/22 演習発表Ⅶ
-宿題
--ミニコーパスの素材を用意する
***自分用のミニコーパスを作る
(テキストデータは別途用意するのを前提として)
-日本語コーパスのタグ付けのレベル
|~テキストのレベル|ツール|必要な技術|h
|~プレーンテキスト|テキストエディタ|grepと正規表現|
|~構造化テキスト|ひまわり→ Excel|XML・マークアップの基礎...
|~形態素解析済みテキスト|UniDic+MeCab→中納言・ChaKi|形態...
+プレーンテキスト:テキストエディタ(grepと正規表現) →...
+構造化テキスト(旧「太陽コーパス」など):XMLと「ひまわ...
+形態素解析済みテキスト(BCCWJ,CHJなど):「中納言」相当...
**プレーンテキストのミニコーパス
***テキストエディタと正規表現
-初心者におすすめの正規表現に対応したテキストエディタ(フ...
--Windows: Sakura Editor
---http://sakura-editor.sourceforge.net/
--Mac: Mi
---http://www.mimikaki.net/
***授業用サクラエディタのダウンロード
(正規表現ライブラリ同梱)
-[[sakura2.zip>https://dl.dropboxusercontent.com/u/134600...
サンプルテキスト
-[[soseki2.zip>https://dl.dropboxusercontent.com/u/134600...
***正規表現
-''正規表現'' [[>用語>http://e-words.jp/w/E6ADA3E8A68FE...
--文字を表すための特殊な文字(メタ文字)を使って文字列の...
--エディタでは置換・検索・grepで利用できる (エディタ以...
--特殊な文字(メタ文字)はすべて半角
//--特殊な文字そのものを表す場合には\でエスケープする(特...
-[[授業資料/正規表現]]
***正規表現に関する参考資料 [#w86de08b]
-サクラエディタの正規表現:http://sakura-editor.sourcefor...
-正規表現に関する本 [[amazonで検索>http://www.amazon.co....
#amazon(4873114500)
#amazon(4873113598)
#clear
**構造化テキストのミニコーパス
***XMLとひまわり
-[[XML>https://ja.wikipedia.org/wiki/Extensible_Markup_La...
--独自のタグが定義できる汎用のマークアップ言語
--多くのコーパスがXMLで記述されている。
---「現代日本語書き言葉均衡コーパス」(BCCWJ)も「日本語...
***ひまわり
-[[全文検索システム「ひまわり」>http://www2.ninjal.ac.jp/...
-ただのテキストファイル(プレーンテキスト)ではなく、XML...
-基本的に文字列検索のみ(携帯論情報付きデータの検索にはあ...
***全文検索システム「ひまわり」について
-[[ひまわり のダウンロードページ>http://www2.ninjal.ac.jp...
***テキストデータを「ひまわり」で利用できるようにする
-[[XMLファイルを自分で作る>http://www2.ninjal.ac.jp/lrc/i...
-[[インポート機能をつかって簡単に作る>http://www2.ninjal....
**2016/12/15 演習発表Ⅵ
-発表2件
(ミニコーパス作成に向けて)
-[[Web茶まめ>http://chamame.ninjal.ac.jp/]]
-語種比率
-延べ語数異なり語数比率
--Type Token Raio
--ピボットテーブルでの計算
**2016/12/08 演習発表Ⅴ
-[[ジップ(Zipf)の法則>https://ja.wikipedia.org/wiki/%E3...
--順位×頻度≒定数
-特徴語抽出
--対数尤度比 Log Likelihood Ratio
--Excel用の関数(VBA)
Public Function LogLikelihood(ByVal target As Long, comp...
a = target
b = comparison
c = targetTotal - a
d = comparisonTotal - b
If a = 0 Then aloga = 0 Else aloga = a * Log(a)
If b = 0 Then blogb = 0 Else blogb = b * Log(b)
LogLikelihood = 2 * (aloga + blogb + c * Log(c) + d ...
If target / targetTotal < comparison / comparisonTot...
End Function
-[[ダウンロード LLR.xlsm>http://www.ogiso.net/wiki/index....
--cf.[[『現代日本語書き言葉均衡コーパス』語彙表>http://pj...
**2016/12/01 演習発表Ⅳ
***vlookup関数
自分で作ったミニデータベースを検索して値を取り出すような...
-[[授業資料/vlookup関数]]
***コロケーション強度
単に頻度をみるのではなく、2つの語が本当に共起しやすいの...
-[[授業資料/コロケーション強度]]
**2016/11/24 (休み)外語祭
**2016/11/17 演習発表Ⅲ
(アルバイト募集)
-[[じんもんこん2016>http://jinmoncom.jp/sympo2016/]] 受...
--12/9(金)午後、10(土)、11(日)
--時給1000円、交通費・弁当支給
(前回補足コメント)
-BCCWJデータの年代の偏りについて
--「語数について」ピボット集計
--経年変化はレジスターを限定しないとできない。
--初出探しに使うことはほぼできない。
***クロス集計表からのコレスポンデンス分析
-「やはり」「やっぱり」「やっぱ」とレジスター
yahari<-matrix(c(
1,2,0,9,4,0,
20,12,1,30,23,0,
31,54,13,17,31,2
)
,3,6,byrow = T)
colnames(yahari)<-c("雑誌","書籍","新聞","ブログ","知恵...
rownames(yahari)<-c("ヤッパ","ヤッパリ","ヤハリ")
#MASSパッケージを読み込む
library(MASS)
(yahari.ca<-corresp(yahari,nf=3))
biplot(yahari.ca)
#固有値
固有値<-yahari.ca$cor^2
round(固有値,3)
#累積寄与率
round(100*固有値/sum(固有値),2)
参考リンク:[[Rと対応分析>https://www1.doshisha.ac.jp/~m...
-玉葱の表記
negi<-matrix(c(
42,93,2,129,90,7,0,1,12,23,47,0,
33,36,0,65,87,6,4,36,11,0,61,6,
5,30,5,33,9,1,0,1,8,0,2,0,
97,336,0,215,225,39,0,3,15,0,92,4,
3,23,0,31,86,0,3,0,0,0,28,2
) ,5,12,byrow = T)
colnames(negi)<-c("P雑誌","P書籍","P新聞","L書籍","ブロ...
rownames(negi)<-c("タマネギ","たまねぎ","玉ネギ","玉ねぎ...
library(MASS)
(negi.ca<-corresp(negi,nf=5))
biplot(negi.ca)
固有値<-negi.ca$cor 2
round(固有値,3)
#累積寄与率
round(100*固有値/sum(固有値),2)
**2016/11/10 休講
-シカゴに行ってきます。
**2016/10/27 演習発表Ⅱ
-多変量解析
--主成分分析
--''対応分析''=コレスポンデンス分析
-参考資料:[[[連載]フリーソフトによるデータ解析・マイニン...
--第26回 Rと対応分析 https://www1.doshisha.ac.jp/~mjin/R...
**バ行ヴァ行
キー: (語彙素="バイオリン" OR 語彙素="バイオレット" OR ...
語彙素="バイキング" OR 語彙素="バカンス" OR 語彙素="バチ...
語彙素="バラエティ" OR 語彙素="バリエーション" OR 語彙素...
語彙素="ビーナス" OR 語彙素="ビオラ" OR 語彙素="ビザ" OR...
語彙素="ベテラン" OR 語彙素="ベトナム" OR 語彙素="バージ...
**2016/10/20 演習発表Ⅰ
**2016/10/13 Rを使ってみる / 研究例紹介
-[[R>https://ja.wikipedia.org/wiki/R%E8%A8%80%E8%AA%9E]]...
--Rのダウンロード https://cran.ism.ac.jp/bin/windows/base/
-中納言でBCCWJコアの語彙素「矢張り」を検索、語形別に集計
| |雑誌|書籍|新聞|ブログ|知恵袋|白書|
|ヤッパ|1|2||9|4||
|ヤッパリ|20|12|1|30|23||
|ヤハリ|31|54|13|17|31|2|
***独立性の検定(χ二乗検定)
-ブログと知恵袋で「やはり」「やっぱり」「やっぱ」の使われ...
data <- matrix(c( 9,4,30,23,17,31), ncol=2, byrow=T)
chisq.test(data)
帰無仮説(H0):二つのレジスターと「やはり」類の使用頻度...
検定の結果、p<0.05であれば0.05(= 5%)水準でH0は棄却される ...
-参考:http://www.weblio.jp/content/%E7%8B%AC%E7%AB%8B%E6...
***クラスター分析
--「やはり」「やっぱり」「やっぱ」の使用から見たレジスタ...
yahari<-matrix(c(
1,2,0,9,4,0,
20,12,1,30,23,0,
31,54,13,17,31,2
)
,3,6,byrow = T)
colnames(yahari)<-c("雑誌","書籍","新聞","ブログ","知恵...
rownames(yahari)<-c("ヤッパ","ヤッパリ","ヤハリ")
yahari <- t(yahari) #行と列を入れ替え
yahari.d<-dist(yahari) #距離の計算
yahari.d
result <- hclust(yahari.d, method="ward.D") #word法でク...
plot(result,hang=-1) #デンドログラムを描く
-参考:https://www1.doshisha.ac.jp/~mjin/R/28/28.html
***研究紹介
-「『現代日本語書き言葉均衡コーパス』における可能表現のバ...
//2009年日本語学会
#amazon(4274065707)
#clear
**2016/10/06 イントロダクション
-[[自己紹介]]
--大学共同利用機関法人人間文化研究機構 国立国語研究所 htt...
-コーパス
--[[国立国語研究所コーパス開発センター>http://pj.ninjal.a...
--[[「現代日本語書き言葉均衡コーパス(BCCWJ)」>http://pj...
--BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]]
-ツール
--[[Web茶まめ>http://chamame.ninjal.ac.jp]]
---[[MeCab>http://taku910.github.io/mecab/]]
---[[UniDic>https://ja.osdn.net/projects/unidic/]]
--[[茶器 Chaki.NET>https://ja.osdn.net/projects/chaki/]]
--[[R>https://www.r-project.org/]]
***[[シラバス>http://www.ogiso.net/wiki/index.php?plugin=...
: 講義・演習の別 | 演習
: 授業の目標 | 日本語コーパスを研究に利用することが...
: 授業の概要 | 日本語コーパスを活用するための技術、統計的...
: 授業の計画 | 実際にコーパスを利用する演習発表をと...
最初に講義形式でコーパスの利用法を説明した後は、毎...
: 成績の評価 | 授業態度・期末レポート等を総合して評...
: 事前学習等 | 担当教員の前期の授業(Japan Studies 1)を...
終了行:
[[東京外大2016]]
*Japan Studies 2:日本語コーパスの活用
-秋学期・木曜4限
-ogiso@ogiso.net ←@を@に直してください
----
-[[コーパス検索アプリケーション「中納言」 https://chunago...
**アクティブラーニングについて
-次のイベントのうちいずれか2つ以上に参加して報告すること
--11/2 [[語学研究所定例研究会(小木曽)>http://www.tufs....
--12/3 [[第一回 学習者コーパスワークショップ ―学習者コー...
--12/9 [[じんもんこん2016特別講演「言語研究と言語資源」>...
--2017/2/10 [[NINJALチュートリアル「『日本語歴史コーパス...
--2017/3/6-11 [[国語研・言語資源活用週間>http://pj.ninjal...
(今後、これ以外のイベントも紹介します)
**レポートについて
-BCCWJとこの授業で紹介した手法を活用した日本語研究
-〆切:1月26日(木)
-枚数:A4用紙で4枚以上~20枚以下
-メールで提出
**2017/01/19 質問・レポート課題の調査(II)
-レポート作成を念頭に、コーパスを使い検索結果を活用するこ...
-ミニコーパスの作成に関する質問にもお答えします。
-レポート課題のための調査を進めつつ積極的に質問してくださ...
**2017/01/12 質問・レポート課題の調査(I)
-レポート作成を念頭に、コーパスを使い検索結果を活用するこ...
-レポート課題のための調査を進めつつ積極的に質問してくださ...
**2017/01/05 ミニコーパスを作る
***前回補足(ひまわりによる既存のデータの活用)
-ひまわり用データ
--[[近代雑誌のコーパス>http://pj.ninjal.ac.jp/corpus_cent...
--青空文庫 [[ひまわり用「青空文庫」パッケージ>http://www2...
--[[「国会会議録」パッケージ>http://www2.ninjal.ac.jp/lrc...
-インポート機能で自動生成したXMLを修正する
--属性の付与
--設定ファイルの修正
--再インデックス
***形態素解析の利用
インストールと利用のデモ
-MeCab http://taku910.github.io/mecab/
-UniDic https://ja.osdn.net/projects/unidic/
-[[Web茶まめ>http://chamame.ninjal.ac.jp/]]
#amazon(4254516029);
#clear
***テキストの性質に関する古典的な指標とその出し方
-語種比率
-TTR (Type Token Ratio)延べ異なり比
-名詞率
-MVR (Modifier / Verb Ratio)
--[[樺島忠夫, 寿岳章子『文体の科学』1965年>http://iss.ndl...
-平均文長
***形態素解析結果を利用するツール
-CaboCha (文節係り受け解析) https://taku910.github.io/cab...
-ChaKi.net (コーパス管理ツール)https://ja.osdn.net/proj...
-デモ
***テキスト処理のレベルとツール
|~処理|形態素解析(短単位)→|(長単位解析)→|文節係り受け...
|~BCCWJの場合|MeCab(解析器)+UniDic(辞書)→|Comainu→|→...
|~一般向けツール|MeCabなど(解析器)+UniDicなど(辞書)&...
**2016/12/22 演習発表Ⅶ
-宿題
--ミニコーパスの素材を用意する
***自分用のミニコーパスを作る
(テキストデータは別途用意するのを前提として)
-日本語コーパスのタグ付けのレベル
|~テキストのレベル|ツール|必要な技術|h
|~プレーンテキスト|テキストエディタ|grepと正規表現|
|~構造化テキスト|ひまわり→ Excel|XML・マークアップの基礎...
|~形態素解析済みテキスト|UniDic+MeCab→中納言・ChaKi|形態...
+プレーンテキスト:テキストエディタ(grepと正規表現) →...
+構造化テキスト(旧「太陽コーパス」など):XMLと「ひまわ...
+形態素解析済みテキスト(BCCWJ,CHJなど):「中納言」相当...
**プレーンテキストのミニコーパス
***テキストエディタと正規表現
-初心者におすすめの正規表現に対応したテキストエディタ(フ...
--Windows: Sakura Editor
---http://sakura-editor.sourceforge.net/
--Mac: Mi
---http://www.mimikaki.net/
***授業用サクラエディタのダウンロード
(正規表現ライブラリ同梱)
-[[sakura2.zip>https://dl.dropboxusercontent.com/u/134600...
サンプルテキスト
-[[soseki2.zip>https://dl.dropboxusercontent.com/u/134600...
***正規表現
-''正規表現'' [[>用語>http://e-words.jp/w/E6ADA3E8A68FE...
--文字を表すための特殊な文字(メタ文字)を使って文字列の...
--エディタでは置換・検索・grepで利用できる (エディタ以...
--特殊な文字(メタ文字)はすべて半角
//--特殊な文字そのものを表す場合には\でエスケープする(特...
-[[授業資料/正規表現]]
***正規表現に関する参考資料 [#w86de08b]
-サクラエディタの正規表現:http://sakura-editor.sourcefor...
-正規表現に関する本 [[amazonで検索>http://www.amazon.co....
#amazon(4873114500)
#amazon(4873113598)
#clear
**構造化テキストのミニコーパス
***XMLとひまわり
-[[XML>https://ja.wikipedia.org/wiki/Extensible_Markup_La...
--独自のタグが定義できる汎用のマークアップ言語
--多くのコーパスがXMLで記述されている。
---「現代日本語書き言葉均衡コーパス」(BCCWJ)も「日本語...
***ひまわり
-[[全文検索システム「ひまわり」>http://www2.ninjal.ac.jp/...
-ただのテキストファイル(プレーンテキスト)ではなく、XML...
-基本的に文字列検索のみ(携帯論情報付きデータの検索にはあ...
***全文検索システム「ひまわり」について
-[[ひまわり のダウンロードページ>http://www2.ninjal.ac.jp...
***テキストデータを「ひまわり」で利用できるようにする
-[[XMLファイルを自分で作る>http://www2.ninjal.ac.jp/lrc/i...
-[[インポート機能をつかって簡単に作る>http://www2.ninjal....
**2016/12/15 演習発表Ⅵ
-発表2件
(ミニコーパス作成に向けて)
-[[Web茶まめ>http://chamame.ninjal.ac.jp/]]
-語種比率
-延べ語数異なり語数比率
--Type Token Raio
--ピボットテーブルでの計算
**2016/12/08 演習発表Ⅴ
-[[ジップ(Zipf)の法則>https://ja.wikipedia.org/wiki/%E3...
--順位×頻度≒定数
-特徴語抽出
--対数尤度比 Log Likelihood Ratio
--Excel用の関数(VBA)
Public Function LogLikelihood(ByVal target As Long, comp...
a = target
b = comparison
c = targetTotal - a
d = comparisonTotal - b
If a = 0 Then aloga = 0 Else aloga = a * Log(a)
If b = 0 Then blogb = 0 Else blogb = b * Log(b)
LogLikelihood = 2 * (aloga + blogb + c * Log(c) + d ...
If target / targetTotal < comparison / comparisonTot...
End Function
-[[ダウンロード LLR.xlsm>http://www.ogiso.net/wiki/index....
--cf.[[『現代日本語書き言葉均衡コーパス』語彙表>http://pj...
**2016/12/01 演習発表Ⅳ
***vlookup関数
自分で作ったミニデータベースを検索して値を取り出すような...
-[[授業資料/vlookup関数]]
***コロケーション強度
単に頻度をみるのではなく、2つの語が本当に共起しやすいの...
-[[授業資料/コロケーション強度]]
**2016/11/24 (休み)外語祭
**2016/11/17 演習発表Ⅲ
(アルバイト募集)
-[[じんもんこん2016>http://jinmoncom.jp/sympo2016/]] 受...
--12/9(金)午後、10(土)、11(日)
--時給1000円、交通費・弁当支給
(前回補足コメント)
-BCCWJデータの年代の偏りについて
--「語数について」ピボット集計
--経年変化はレジスターを限定しないとできない。
--初出探しに使うことはほぼできない。
***クロス集計表からのコレスポンデンス分析
-「やはり」「やっぱり」「やっぱ」とレジスター
yahari<-matrix(c(
1,2,0,9,4,0,
20,12,1,30,23,0,
31,54,13,17,31,2
)
,3,6,byrow = T)
colnames(yahari)<-c("雑誌","書籍","新聞","ブログ","知恵...
rownames(yahari)<-c("ヤッパ","ヤッパリ","ヤハリ")
#MASSパッケージを読み込む
library(MASS)
(yahari.ca<-corresp(yahari,nf=3))
biplot(yahari.ca)
#固有値
固有値<-yahari.ca$cor^2
round(固有値,3)
#累積寄与率
round(100*固有値/sum(固有値),2)
参考リンク:[[Rと対応分析>https://www1.doshisha.ac.jp/~m...
-玉葱の表記
negi<-matrix(c(
42,93,2,129,90,7,0,1,12,23,47,0,
33,36,0,65,87,6,4,36,11,0,61,6,
5,30,5,33,9,1,0,1,8,0,2,0,
97,336,0,215,225,39,0,3,15,0,92,4,
3,23,0,31,86,0,3,0,0,0,28,2
) ,5,12,byrow = T)
colnames(negi)<-c("P雑誌","P書籍","P新聞","L書籍","ブロ...
rownames(negi)<-c("タマネギ","たまねぎ","玉ネギ","玉ねぎ...
library(MASS)
(negi.ca<-corresp(negi,nf=5))
biplot(negi.ca)
固有値<-negi.ca$cor 2
round(固有値,3)
#累積寄与率
round(100*固有値/sum(固有値),2)
**2016/11/10 休講
-シカゴに行ってきます。
**2016/10/27 演習発表Ⅱ
-多変量解析
--主成分分析
--''対応分析''=コレスポンデンス分析
-参考資料:[[[連載]フリーソフトによるデータ解析・マイニン...
--第26回 Rと対応分析 https://www1.doshisha.ac.jp/~mjin/R...
**バ行ヴァ行
キー: (語彙素="バイオリン" OR 語彙素="バイオレット" OR ...
語彙素="バイキング" OR 語彙素="バカンス" OR 語彙素="バチ...
語彙素="バラエティ" OR 語彙素="バリエーション" OR 語彙素...
語彙素="ビーナス" OR 語彙素="ビオラ" OR 語彙素="ビザ" OR...
語彙素="ベテラン" OR 語彙素="ベトナム" OR 語彙素="バージ...
**2016/10/20 演習発表Ⅰ
**2016/10/13 Rを使ってみる / 研究例紹介
-[[R>https://ja.wikipedia.org/wiki/R%E8%A8%80%E8%AA%9E]]...
--Rのダウンロード https://cran.ism.ac.jp/bin/windows/base/
-中納言でBCCWJコアの語彙素「矢張り」を検索、語形別に集計
| |雑誌|書籍|新聞|ブログ|知恵袋|白書|
|ヤッパ|1|2||9|4||
|ヤッパリ|20|12|1|30|23||
|ヤハリ|31|54|13|17|31|2|
***独立性の検定(χ二乗検定)
-ブログと知恵袋で「やはり」「やっぱり」「やっぱ」の使われ...
data <- matrix(c( 9,4,30,23,17,31), ncol=2, byrow=T)
chisq.test(data)
帰無仮説(H0):二つのレジスターと「やはり」類の使用頻度...
検定の結果、p<0.05であれば0.05(= 5%)水準でH0は棄却される ...
-参考:http://www.weblio.jp/content/%E7%8B%AC%E7%AB%8B%E6...
***クラスター分析
--「やはり」「やっぱり」「やっぱ」の使用から見たレジスタ...
yahari<-matrix(c(
1,2,0,9,4,0,
20,12,1,30,23,0,
31,54,13,17,31,2
)
,3,6,byrow = T)
colnames(yahari)<-c("雑誌","書籍","新聞","ブログ","知恵...
rownames(yahari)<-c("ヤッパ","ヤッパリ","ヤハリ")
yahari <- t(yahari) #行と列を入れ替え
yahari.d<-dist(yahari) #距離の計算
yahari.d
result <- hclust(yahari.d, method="ward.D") #word法でク...
plot(result,hang=-1) #デンドログラムを描く
-参考:https://www1.doshisha.ac.jp/~mjin/R/28/28.html
***研究紹介
-「『現代日本語書き言葉均衡コーパス』における可能表現のバ...
//2009年日本語学会
#amazon(4274065707)
#clear
**2016/10/06 イントロダクション
-[[自己紹介]]
--大学共同利用機関法人人間文化研究機構 国立国語研究所 htt...
-コーパス
--[[国立国語研究所コーパス開発センター>http://pj.ninjal.a...
--[[「現代日本語書き言葉均衡コーパス(BCCWJ)」>http://pj...
--BCCWJ[[中納言>http://chunagon.ninjal.ac.jp]]
-ツール
--[[Web茶まめ>http://chamame.ninjal.ac.jp]]
---[[MeCab>http://taku910.github.io/mecab/]]
---[[UniDic>https://ja.osdn.net/projects/unidic/]]
--[[茶器 Chaki.NET>https://ja.osdn.net/projects/chaki/]]
--[[R>https://www.r-project.org/]]
***[[シラバス>http://www.ogiso.net/wiki/index.php?plugin=...
: 講義・演習の別 | 演習
: 授業の目標 | 日本語コーパスを研究に利用することが...
: 授業の概要 | 日本語コーパスを活用するための技術、統計的...
: 授業の計画 | 実際にコーパスを利用する演習発表をと...
最初に講義形式でコーパスの利用法を説明した後は、毎...
: 成績の評価 | 授業態度・期末レポート等を総合して評...
: 事前学習等 | 担当教員の前期の授業(Japan Studies 1)を...
ページ名: