上智2015/国語学演習IIIa の履歴(No.19)

上智2015

国語学演習IIIa / コーパス日本語学入門

前期・金曜4限
ogiso＠ogiso.net　←＠を@に直してください

BCCWJ中納言 https://chunagon.ninjal.ac.jp/

↑

2015/6/5

6/26, 7/3休講について

↑

復習

「中納言」による検索
Excelでインポート
ピボットテーブルで集計

↑

Excelの基礎

並べ替え
- 反転前文脈の使い方
フィルタ
- テキストフィルタ

↑

検索の例

男と女のレジスタ分布　データ kwic-MaleFemale.zip
- 男性と女性
- 男と女と形容詞

短単位で検索（unit="1"）

キー: (語彙素 LIKE "[男女]" AND (語彙素読み="オトコ" OR 語彙素読み = "オンナ")) 
WITH OPTIONS unit="1" AND tglWords="20" AND limitToSelfSentence="0" AND 
endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND  tglFixVariable="2"

キー: (語彙素="男性" OR 語彙素 = "女性") 
WITH OPTIONS unit="1" AND tglWords="20" AND limitToSelfSentence="0" AND 
endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND tglFixVariable="2"

以下は長単位で検索（unit="2"）

キー: (品詞 LIKE "形容詞%" AND 活用形 LIKE "連体形%") 
AND 後方共起: (語彙素 = "男性" OR 語彙素 = "女性") ON 1 WORDS FROM キー 
WITH OPTIONS unit="2" AND tglWords="10" AND limitToSelfSentence="0" AND 
endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND tglFixVariable="2"

キー: (品詞 LIKE "形容詞%" AND 活用形 LIKE "連体形%") 
AND 後方共起: (語彙素 LIKE "[男女]" AND (語彙素読み="オトコ" OR 語彙素読み = "オンナ")) ON 1 WORDS FROM キー 
WITH OPTIONS unit="2" AND tglWords="10" AND limitToSelfSentence="0" AND 
endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND tglFixVariable="2"

「検索課題」配付資料

語形レベルでの集計
- 例：exhibition データダウンロード kwic-Exhibition.zip

「検索課題」（配付資料）
複数の検索結果の結合
- 例：蒲公英・向日葵・菫
  - データダウンロード kwic-flowers.zip
集計用の列を自分で用意する
- 例：表記（ひらがな・かたかな・漢字）別集計

↑

Excelの文字列関数とIF関数

例：ジャンル（NDC）の整理
- 先頭の文字を取り出す（NDCの一次区分（＝類））
  - =LEFT(<ジャンルのセル>,1)
- スラッシュで区切られた最初の部分（ジャンルの大分類）
  - =LEFT(<ジャンルのセル>,SEARCH("/",<ジャンルのセル>)-1)

集計用に用意した列で文字列処理関数を利用する
- LEFT
- RIGHT
- MID
- LEN
- SEARCH
- SUBSTITUTE
応用例：品詞の大分類を使う
- =LEFT(<品詞>,SEARCH("-",<品詞>)-1)

↑

2015/5/29

先週の宿題：実際に検索、質問

↑

検索結果をExcelで利用する

前々回資料（4.）参照

↑

Excelの基礎

並べ替え
- 反転前文脈の使い方
フィルタ
- テキストフィルタ

↑

「中納言」検索結果のダウンロードとExcelでの利用

ダウンロード
アーカイブの展開（解凍）
Excelでインポート

kwic-150529.zip

キー: 品詞 LIKE "矢張り" 
WITH OPTIONS unit="1" AND tglWords="20" AND limitToSelfSentence="0"
AND endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND  tglFixVariable="2"

キー: 品詞 LIKE "形容詞%" AND 前方共起: 語彙素 = "割合" ON 2 WORDS FROM キー
 WITH OPTIONS unit="1" AND tglWords="20" AND limitToSelfSentence="0"
 AND endOfLine="CRLF" AND tglKugiri="|" AND encoding="UTF-16LE" AND tglFixVariable="2"

↑

【重要】ピボットテーブルの使い方

ピボットテーブル
ピボットグラフ

↑

2015/5/22

BCCWJ中納言の契約書を返却します。

↑

「中納言」の利用（続き）

資料「『中納言』の使い方」　2.7～

↑

検索条件式の利用

キー: 語彙素 = "玉葱" WITH OPTIONS unit="1" AND tglWords="20" AND limitToSelfSentence="0" 
AND endOfLine="CRLF" AND tglKugiri="|" AND  encoding="UTF-16LE" AND tglFixVariable="2"

↑

2015/5/15

↑

「中納言」の利用：形態論情報を使った検索

配布資料「短単位と長単位」

配布資料「『中納言』の使い方」

↑

2015/5/8

出席について

↑

「中納言」アカウント確認

先週申し込んだ人にはアカウントを発行しました。メールを確認してログインして下さい。
ログインできない人は連絡を。

↑

コーパスの形態論情報

↑

短単位と長単位

（スライド）参照

↑

品詞体系

BCCWJはUniDicの品詞体系↓ にもとづく

学校文法との主な違い

品詞
- 名詞-普通名詞-一般（大分類＞中分類＞小分類）のように階層化されている
- 名詞-普通名詞-サ変可能 のように可能性に基づく品詞付与がなされている

「形状詞」という品詞を立てている（＝形容動詞語幹）　例：「奇麗」「愉快」

活用型
- 下一段-ア行（大分類＞行分類（＞小分類））のように階層化されている
- 五段-カ行-イクのように実際の活用にあわせてより細かく分類されている*1

漢語サ変動詞を名詞（語幹）と動詞（「する」）に分割（学校文法では全体で1語の動詞として扱う）　例：「研究|する」

動詞に助動詞「う」が付いた形を動詞の意志推量形（全体として1語）として扱う例：「飲もう」

UniDic見出し語の階層構造

↑

見出し語の階層構造

語彙素：辞書の見出しのレベル
語形：異語形を区別するレベル
書字形：異表記を区別するレベル

各レベルが持つ情報*2

語彙素レベル（語彙素・語彙素読み・語彙素細分類・語種）
- 語形レベル（語形・品詞・活用型・活用形）
  - 書字形レベル（書字形・仮名形）
  - 発音形レベル（発音形・アクセント）

※語彙素読み・語形・発音形はカタカナ表記。語彙素は漢字を多用した「代表表記」。

↑

基本形と出現形

語形以下のレベルでは、基本形（辞書見出し形＝終止形）と出現形（実際の活用形）の別があり、活用語では違う形になる

例：アザラシが泳ぎます

語彙素レベル：（語彙素）泳ぐ　（語彙素読み）オヨグ
- 語形レベル：（語形(基本形)）オヨグ，（語形出現形*3）オヨギ
  - 書字形レベル：（書字形(基本形)）泳ぐ，（書字形出現形）泳ぎ
  - 発音形レベル：（発音形(基本形)）オヨグ，（発音形出現形）オヨギ

↑

見出し語の例とBCCWJ中の用例数

語彙素：矢張り（ヤハリ） 32887
- 語形：ヤハリ：19876
  - 書字形：やはり：19781
  - 書字形：ヤハリ：0
  - 書字形：矢張り：93
  - 書字形：矢張：2
- 語形：ヤッパリ：11373
  - 書字形：やっぱり：11296
  - 書字形：ヤッパリ：36
  - 書字形：やつぱり：23
  - 書字形：やッぱり：2
  - 書字形：矢っ張：1
  - 書字形：矢つ張：1
  - 書字形：矢ッ張り：4
  - 書字形：矢っ張り：5
  - 書字形：矢つ張り：5
- 語形：ヤッパシ：96
  - 書字形：やっぱし：96
- 語形：ヤッパ：1506
  - 書字形：やっぱ：1503
  - 書字形：ヤッパ：3
- 語形：ヤパ：35
  - 書字形：やぱ：35
- 語形：ヤパリ：1
  - 書字形：やぱり：1