上智2015
国語学演習IIIa / コーパス日本語学入門
- 前期・金曜4限
- ogiso@ogiso.net ←@を@に直してください
2015/05/01
BCCWJ「中納言」アカウントについて
- 先週申し込んだ人にはアカウントを発行しました。メールを確認してログインしてみて下さい。
- 誤って発行された『日本語歴史コーパス』(CHJ)のアカウントのメールは無視してください。
日本語コーパスの紹介(2) コーパスの設計とサンプリング
- 均衡コーパス(Balanced corpus)
- 「バランスがとれている」とは?
- コーパスの母集団の設定とサンプリング
- BCCWJのサブコーパス
- 可変長と固定長
- 著作権をめぐる問題
参考リンク
- 英語のコーパス リファレンス
- 現代日本語書き言葉均衡コーパス(BCCWJ)
2015/04/24
BCCWJ「中納言」申込み
下記の書類は授業で配布しますが、書き損じた場合などには下記のリンク先のファイルを利用してください。
現代日本語書き言葉均衡コーパス(BCCWJ)とは
- BCCWJについて、まず最小限のことを説明します。
日本語コーパスの紹介(1)コーパスとはどんなものか
- 狭義のコーパス
- 言語研究を目的として収集され、言語研究のための情報が付けられたコンピュータ上で利用可能な大規模な言語データ。
- 広義のコーパス
- コンピュータ上で利用可能な大規模な言語データ。必ずしも言語研究向きではないが、言語研究にも利用可能。
- この授業で扱うのは狭義のコーパス。中でも「現代日本語書き言葉均衡コーパス(BCCWJ)」
- 日本語コーパス以前のデータとBCCWJの違いは
2015/04/17
イントロダクション
- デモ
- 「現代日本語書き言葉均衡コーパス(BCCWJ)」
- Excelによる集計(ピボットテーブル)
- 形態素解析:茶まめ/MeCab+UniDic