B2-7 日 本 語 テキストに 対 する 述 語 語 義 と 意 味 役 割 のアノテーション 言 語 処 理 学 会 第 18 回 年 次 大 会 (NLP2012) @ 広 島 市 立 大 学 3 月 14 日 ( 水 ) 15:00-18:00 502 講 義 室 林 部 祐 太 + 小 町 守 + 松 本 裕 治 + + 奈 良 先 端 大 隅 田 飛 鳥 * *KDDI 研 究 所 1
述 語 項 構 造 解 析 項 述 語 私 は 妻 に 花 を 贈 った. ガ 格 ニ 格 ヲ 格 関 係 ラベル 機 械 翻 訳 [Wu 09] や 情 報 抽 出 [Surdeanu 03]などに 有 用 2
項 と 述 語 の 関 係 の 粒 度 ( 日 本 語 ) 表 層 格 レベル( 助 詞 相 当 ラベル) 従 来 の 多 くの 研 究 の 対 象 ガ 格 ニ 格 ヲ 格 [ 河 原 07, 飯 田 10, Taira 10, 吉 川 10] 深 層 格 レベル( 意 味 役 割 ラベル) 対 象 動 作 主 経 験 者 [ 肥 塚 07, 竹 内 10] あまり 対 象 にされてこ なかった 理 由 の1 つ: 実 テキストへ 意 味 役 割 を 大 規 模 にアノテーショ ンしているコーパスが 未 整 備 ( 英 :PennTreebank, 英 中 亜 :Ontonote) 3
本 研 究 の 目 的 意 味 役 割 アノテート 日 本 語 テキスト 4
意 味 役 割 付 与 の 応 用 例 言 い 換 え 同 一 事 象 を 表 すが 統 語 的 に 異 なる 構 造 持 つ 場 合 深 層 格 なら 同 じ 項 構 造 風 呂 が 水 で 一 杯 になった place object 水 が 風 呂 を 一 杯 にした object place [ 辻 井 85] 5
意 味 役 割 依 存 関 係 語 義 [ 渡 邉 10] 6
語 義 決 定 に 意 味 役 割 情 報 が 必 要 な 場 合 She drives a car. drive.01 : object=vehicle drive.02 : object=things in motion [ 渡 邉 10] PropBankによる 7
意 味 役 割 決 定 に 語 義 情 報 が 必 要 な 場 合 She comes to work on weekends. [A1] come.01 : 動 作 を 意 味 She comes to terms with it. [A0] come.14 : 妥 協 する [ 渡 邉 10] PropBankによる 8
本 研 究 の 貢 献 述 語 の 項 に 意 味 役 割 を 付 与 表 層 格 レベルで 既 に 付 与 されているNAIST テキストコーパス [ 飯 田 10]に 対 して 動 詞 項 構 造 シソーラス[ 竹 内 08, 竹 内 11] で 定 義 されている 項 構 造 と 意 味 役 割 の 体 系 に 則 った 述 語 の 語 義 ラベルも 付 与 述 語 の 語 義 と 意 味 役 割 には 相 互 に 依 存 関 係 がある[ 渡 邉 10] ことから 9
語 義 意 味 役 割 付 与 済 み 日 本 語 コーパス コーパス 名 対 象 データ 意 味 役 割 の 付 与 対 象 語 義 辞 書 動 詞 項 構 造 シソーラス 作 例 7,473 文 文 内 項 学 研 Lexeed EDR 電 子 化 辞 書 GDA[ 橋 田 05] コーパス 新 聞, 雑 誌, 辞 典 等 の 約 20 万 文 1994 年 毎 日 新 聞 約 3.7 万 文 [ 小 原 11] のコーパス BCCWJ( 現 代 日 本 語 書 き 言 葉 均 衡 コーパス)840 文 今 回 作 成 したコーパス 1994 年 毎 日 新 聞 2338 事 例 文 内 項 文 間 項, 外 界 項 全 ての 自 立 語 に フレーム 名 文 内 項, 文 間 項, 外 界 項 EDR 概 念 辞 書 岩 波 国 語 辞 典 第 五 版 - 学 研 Lexeed 10
深 層 格 レベルでの 項 構 造 の 体 系 と 辞 書 11
深 層 格 レベルでの 項 構 造 の 体 系 と 辞 書 フレーム 意 味 論 に 基 づく 項 構 造 体 系 概 念 意 味 論 に 基 づく 項 構 造 体 系 12
概 念 意 味 論 に 基 づく 項 構 造 体 系 語 彙 概 念 構 造 (Lexical Conceptual Structure;LCS)[Jackendoff 90, 影 山 96] BECOME, CONTROL のような 意 味 述 語 を 意 味 特 性 ごとに 用 意 それらの 組 み 合 わせで 動 詞 の 意 味 を 記 述 13
動 詞 項 構 造 シソーラス[ 竹 内 08, 竹 内 11] [ 竹 内 06] によるLCS 辞 書 を 用 いた 動 詞 を 横 断 した 最 小 限 の 意 味 役 割 を87 種 類 設 計 動 詞 4,425 語 (7,473 語 義 )の 作 例 に 対 して 付 与 14
本 研 究 のアノテーション 方 針 15
NAISTテキストコーパス1.4β 日 本 語 述 語 項 構 造 解 析 のタスクの 訓 練 と 評 価 において 広 く 用 いられているコーパス 京 都 大 学 テキストコーパスVersion 3.0を 元 に 約 4 万 文 に 対 して, 述 語 の 格 関 係, 事 態 性 名 詞 の 格 関 係, 名 詞 間 の 照 応 関 係 がアノテー ションされている 16
付 与 対 象 対 象 の 動 詞 中 頻 度 の 動 詞 対 象 の 項 各 動 詞 の 必 須 格 の 項 に 絞 った 全 ての 格 を 対 象 にすると 付 与 すべき 項 の 数 が 増 え, 付 与 できる 事 例 数 が 減 少 するため 項 は 種 類 ( 文 内 項, 文 間 項, 外 界 項 )に 関 係 なく 全 て 対 象 に 付 与 17
付 与 したラベル 動 詞 項 構 造 シソーラス(LCS)[ 竹 内 08]とそこで 定 義 されている 意 味 役 割 を 付 与 既 存 の 辞 書 の 中 で 最 も 整 備 が 進 んでいる 項 構 造 の 検 索 システムも 整 備 されている 副 詞 相 当 等 の 文 法 機 能 は 除 外 結 果 物 と 生 成 物 のように 区 別 のつきにくい 意 味 役 割 は1つにまとめた 大 量 の 意 味 役 割 の 中 から1 つを 選 ぶのは 困 難 意 味 役 割 を 役 割 ごとにグループ 化 し,グループを 選 択 した 後 に, 意 味 役 割 を 付 与 するようにした. 18
19
20
21
語 義 ラベルの 付 与 語 義 と 意 味 役 割 には 相 互 に 依 存 関 係 がある[ 渡 邉 10] 意 味 役 割 付 与 と 語 義 曖 昧 性 解 消 の 同 時 学 習 の 研 究 を 可 能 とするため 基 本 語 データベース:Lexeed [ 笠 原 04] の 語 義 番 号 を 付 与 動 詞 項 構 造 シソーラスでも 用 いられている 慣 用 句 の 一 部 として 用 いられている 場 合 慣 用 句 の 特 殊 ラベルを 付 与 Lexeedには 無 い 語 義 で 用 いられている 場 合 新 語 義 の 特 殊 ラベルを 付 与 22
作 成 したデータの 分 析 23
統 計 計 172 種 類, 延 べ2,338 個 の 動 詞 を 対 象 語 義 とその 項 の 意 味 役 割 を 付 与 総 意 味 役 割 付 与 数 は4,398 個 上 位 3グループの 付 与 数 は 全 体 の80% 以 上 を 占 める この 偏 りは, 付 与 対 象 を 必 須 格 に 限 定 したことが 理 由 カラ 格 を 付 与 対 象 にすれば, 場 所 や 方 向 デ 格 を 付 与 対 象 にすれば, 道 具 や 手 段 の 意 味 役 割 は 増 える 24
ガ 格 の 意 味 役 割 の 分 布 大 半 は 次 の3つが 占 めている 操 作 対 象 に 対 して 直 接 ある 操 作 を 行 う 動 作 主 意 志 性 が 無 いものが 主 体 となる 対 象 意 志 性 がある 者 が 不 本 意 な 状 況 に 陥 る 主 体 とな る 経 験 者 対 象 : 事 態 は コメ 生 産 や 新 会 派 結 成 と いった 事 態 性 名 詞 が 項 となるときに 付 与 ガ 格 (2,277) 上 位 6 種 のカバー 率 94.0% 動 作 主 (1,226), 対 象 (450), 経 験 者 (177), 対 象 : 事 態 (125), 経 験 者?(91), 動 作 主?(72) 25
ヲ 格 の 意 味 役 割 の 分 布 対 象 (とその 細 分 類 )が 多 い 行 為 の 直 接 対 象 を 表 す 意 味 役 割 生 成 物 その 行 為 の 結 果 生 じるもの で 対 象 とは 区 別 ヲ 格 項 を 持 つ124 動 詞 中, 施 行 する 組 織 す る 作 り 出 す などの8 種 類 の 何 かを 生 成 する ことを 表 す 動 詞 で 用 いられた 慣 用 句 の 一 部 として 用 いられていることを 示 す 意 味 役 割 慣 用 も 他 の 格 と 比 べて 多 い ヲ 格 (1,421) 上 位 6 種 のカバー 率 87.5% 対 象 (761), 対 象 : 事 態 (220), 対 象 : 人 (108), 生 成 物 (82), 慣 用 (38), 削 除 (35) 26
ニ 格 の 意 味 役 割 の 分 布 意 味 役 割 の 偏 りが 最 も 小 さかった また, 方 向 期 限, 内 容 物 などニ 格 にし か 現 れなかった 意 味 役 割 もいくつかあった ニ 格 (6,05) 上 位 6 種 のカバー 率 68.4% 着 点 (178), 対 象 (68), 対 象 : 事 態 (61), 着 点?(43), 着 点 : 場 所 (35), 対 象 : 人 (29) 27
語 義 ラベルの 一 致 率 8 動 詞 92 事 例 を2 人 の 作 業 者 でアノテーショ ンした 語 義 ラベルの 一 致 率 は68% 29 事 例 一 致 しなかった 慣 用 句 か 否 かの 見 解 の 違 い 8 事 例 新 語 義 か 否 かの 見 解 の 違 い 6 事 例 語 義 の 認 識 の 違 い 14 事 例 28
意 味 役 割 の 一 致 率 一 方 の 作 業 者 のアノテーションを 正 解 もう 一 方 をシステムの 出 力 とみなす 意 味 役 割 の 一 致 率 はガ 格,ヲ 格,ニ 格 の 順 に 低 下 する 意 味 役 割 の 分 布 のばらつきもこの 順 に 大 きく なる ラベルの 選 択 候 補 が 増 えることが 理 由 の1つ P R F ガ 0.98 (59/60) 0.65 (59/91) 0.78 ヲ 0.83 (24/29) 0.41 (24/58) 0.55 ニ 0.36 (4/11) 0.25 (4/16) 0.30 29
アノテーションの 問 題 点 と 対 応 策 30
比 喩 的 表 現 語 義 ラベルの 決 定 動 詞 と 項 だけでなく 文 脈 を 考 慮 する 必 要 がある 風 に 吹 かれるままに 吹 く に 最 も 近 いLexeed の 語 義 は 風 が 物 を 揺 り 動 かしながら 通 っていく 運 命 の 風 に 吹 かれるままに ある 作 業 者 は 吹 く に 新 語 義 ラベルを 付 与 31
比 喩 的 表 現 かどうかの 判 断 の 揺 れ 比 喩 的 に 用 いられているかの 判 断 作 業 者 間 での 揺 れ 比 喩 的 な 表 現 の 可 能 性 がある 場 合 最 も 近 い 語 義 を 選 択 さらに 比 喩 的 表 現 ラベルを 付 与 する 32
意 思 性 の 有 無 主 体 に 対 する 意 味 役 割 その 主 体 の 意 思 性 の 有 無 によって 動 作 主 か 経 験 者 が 変 わる 判 断 には 揺 れが 生 じる? が 付 いたラベルは 経 験 者 が 最 も 多 かった 33
意 思 性 の 有 無 の 判 断 の 揺 れ 香 港 は... 経 済 発 展 を 遂 げた 香 港 が, 意 思 をもって 経 済 発 展 を 遂 げた? 偶 然 経 済 発 展 を 遂 げた? この 文 からは 判 別 できない 経 験 者? や 動 作 主? といった 意 味 役 割 ラ ベル 曖 昧 さを 表 現 するために 経 験 者 や 動 作 主 と は 独 立 して 用 いる 34
まとめ NAIST テキストコーパスに 対 して 語 義 と 意 味 役 割 のアノテーションを 行 った 体 系 的 な 大 規 模 アノテーションを 行 うことで, 意 味 役 割 の 頻 度 分 布 が 分 かった 用 いられやすい 意 味 役 割 や, 格 による 意 味 役 割 の 使 用 頻 度 の 偏 りが 分 かった 今 後 の 課 題 さらなるデータの 分 析 を 行 い アノテーション 基 準 を 洗 練 させる 必 須 格 以 外 への 意 味 役 割 のアノテーション 35
36
APPENDIX 37
タグ 付 システム 専 用 のウェブサイトを 構 築 38
39
40
語 義 ラベルが 不 一 致 だった 例 29 事 例 一 致 しなかった 慣 用 句 か 否 かの 見 解 の 違 い 8 事 例 隙 を 突 く 新 語 義 か 否 かの 見 解 の 違 い 6 事 例 雨 が 降 る 語 義 の 認 識 の 違 い 14 事 例 41
意 味 役 割 のグループごとの 一 致 率 意 味 役 割 のグループごとの 一 致 率 意 味 役 割 ごとの 一 致 率 より 上 昇 P R F ガ 0.98 (65/66) 0.71 (65/91) 0.83 ヲ 0.89 (41/46) 0.71 (41/58) 0.79 ニ 0.46 (6/13) 0.38 (6/16) 0.41 42
ガ 格 の 意 味 役 割 のリスト 動 作 主 1226 対 象 450 経 験 者 177 対 象 ( 事 態 ) 125 経 験 者? 91 動 作 主? 72 その 他 31 対 象? 28 感 情 15 原 因 12 対 象 ( 人 ) 9 対 象 ( 身 体 部 分 ) 6 場 所 6 動 作 主 ( 操 作 対 象 ) 5 慣 用 5 対 象 ( 生 物 ) 4 状 態 3 決 定 内 容 2 内 容 物? 2 範 囲 2 道 具 2 状 況? 状 態? 1 期 間 1 程 度 1 状 況 1 43
ヲ 格 の 意 味 役 割 のリスト 対 象 761 対 象 ( 事 態 ) 220 対 象 ( 人 ) 107 生 成 物 82 慣 用 38 削 除 35 対 象? 30 対 象 ( 身 体 部 分 ) 23 役 割 22 感 情 13 基 準 点 13 状 態 12 対 象 ( 生 物 ) 9 状 況 7 程 度 6 用 途 6 目 標 6 材 料 5 場 所 5 道 具 4 経 由 点 3 時 3 経 路 2 着 点? 2 範 囲 2 結 果 1 状 況? 状 態? 1 起 点 ( 場 所 ) 1 期 間 1 変 化 前 1 44
ニ 格 の 意 味 役 割 のリスト 着 点 178 対 象 68 対 象 ( 事 態 ) 61 着 点? 43 着 点 ( 場 所 ) 35 対 象 ( 人 ) 29 基 準 点 25 着 点 ( 身 体 部 分 ) 20 着 点 ( 人 ) 20 慣 用 16 対 象? 16 程 度 14 削 除 13 方 向 12 原 因 11 場 所 9 方 向? 7 期 限 6 内 容 物 5 役 割 4 その 他 3 感 情 2 状 況 1 対 象 ( 身 体 部 分 ) 1 目 標 1 経 由 点 1 方 向 ( 人 ) 1 目 的 1 変 化 先? 1 変 化 先 1 45
フレーム 意 味 論 に 基 づく 項 構 造 体 系 フレーム 状 況 や 語 の 意 味 を 理 解 するための 基 本 単 位 [Fillmore 82] ( 例 ) フレーム 商 取 引 SELLER, BUYER, GOODS, MONEY といった 要 素 (フレーム 要 素 )が sell や pay 等 の 動 詞 の 項 となる 46
FrameNet フレームを 想 起 する 語 を 複 数 挙 げている Ingestion eat.v drink.v 意 味 役 割 Ingestibles [Ingible] Ingestor [Ing] Place [Place] Inherits from: Ingest_substance, Manipulation 項 と 述 語 の2 語 間 の 関 係 ではなく, 項 とフ レームの 関 係 Food, Traveler などの 746 種 類 (FrameNet 1.3) フレーム 間 の 親 子 関 係 7 種 類 日 本 語 では 日 本 語 FrameNet [ 小 原 05] 47
PropBank Predicate: eat Roleset id: eat.01, consume, vncls: 39.1, framnet: Ingestion eat.01: Member of Vncls eat-39.1-1. Roles: Arg0: consumer, eater (vnrole: 39.1-agent) フレームは 動 詞 項 構 Arg1: meal (vnrole: 39.1-patient) 造 ごとに 用 意 Example: intransitive TW's pitch was that sales and earnings at its restaurants have risen steadily and that people-1 won't stop *trace*-1 eating during a downturn. Arg0: *trace* Rel: eating Example: transitive 意 味 役 割 もフレーム ごとに 定 義 (フレーム 間 での 互 換 性 無 ) Euro Disneyland shares made a debut like Snow White yesterday while most of the London stock market looked like it had eaten the Evil Queen's poisoned apple. Arg0: it Rel: eaten Arg1: the Evil Queen 's poisoned apple フレーム 間 の 関 係 は 未 定 義 時 間 を 表 すAM-TMP や, 場 所 を 表 すAM-LOC 等 のフレーム 間 で 共 通 する 意 味 役 割 を 別 途 14 種 類 定 義 48