東京外大2017
Japan Studies 1:コーパス日本語学入門
- 春学期・木曜4限
- ogiso@ogiso.net ←@を@に直してください
2017/04/20
「中納言」オンライン利用申込み
コーパスの設計とサンプリング
- (スライド参照) 第2回コーパスの設計とサンプリング
- 均衡コーパス(Balanced corpus)
- 「バランスがとれている」「代表性」とは?
- コーパスの母集団の設定とサンプリング
- BCCWJのサブコーパス
- 可変長と固定長
- 著作権をめぐる問題
参考リンク
- 英語のコーパス リファレンス
- 現代日本語書き言葉均衡コーパス(BCCWJ)
2017/04/13
「コーパス」について†
- 狭義のコーパス
- 言語研究を目的として収集され、言語研究のための情報が付けられたコンピュータ上で利用可能な大規模な言語データ。
- 現代日本語書き言葉均衡コーパス(BCCWJ) / 日本語歴史コーパス(CHJ)
- 広義のコーパス
- コンピュータ上で利用可能な大規模な言語データ。必ずしも言語研究向きではないが、言語研究にも利用可能。
- さまざまなテキストアーカイブ(新潮文庫の百冊 / 青空文庫 / 国会会議録)
- Web上のデータ
- 検索サイトの利用
- WAC(Web as Corpus)
- この授業で扱うのは主に狭義のコーパス。中でも「現代日本語書き言葉均衡コーパス(BCCWJ)」が中心
- 日本語コーパス以前のデータとBCCWJの違いは
紙の資料からコーパスまで
- (紙の)本文
- (紙の)総索引(コンコーダンス)
- 電子テキスト
- 構造化テキスト
- 形態論情報付きコーパス
現代日本語書き言葉均衡コーパス(BCCWJ)とは
- BCCWJについて、まず最小限のことを説明します。
「現代日本語書き言葉均衡コーパス(BCCWJ)」
「中納言」オンライン利用申込み
2017/04/06
イントロダクション/日本語コーパスの紹介
- デモ
- 「現代日本語書き言葉均衡コーパス(BCCWJ)」
- Web茶まめ
- Excelによる集計(ピボットテーブル)