全 文 複 写 可
2016(平 成28)年 度 修 士 論 文
対 話 工 一 ジ ェ ン トの た め の
動 向 情 報 に 基 づ く話 題 転 換 に 関す る研 究
提 出 日2017(平 成29)年2月24日
首 都 大 学 東 京 大 学 院
シ ス テ ム デ ザ イ ン研 究 科 シ ス テ ム デ ザ イ ン 専 攻 情 報 通 信 シ ス テ ム 学 域 高 間 研 究 室
15890526瀧 口 慈 勇
指 導 教 員 高 間 康 史 教 授
目次
1.は じ め に 2.関 連 研 究
2.1.対 話 工 一 ジ ェ ン ト
2.1.1.対 話 破 綻
2.1.2.話 題 転 換
2.2.関 連 す る 情 報 の 取 得 3.研 究 概 要
3.1.研 究 シ ス テ ム
3.1.1.話 題 転 換
3.1.2.関 連 情 報 の 検 索 3.2.対 話 破 綻 の 検 出 指 標 4.実 験
4.1.予 備 実 験
4.1.1.実 験 概 要4.1.2.実 験 結 果
4.1.2.1対 話 破 綻 検 出 指 標 の 評 価
4.1.2.2.話 題 転 換4.2.評 価 実 験
4.2.1.実 験 概 要4。2.2.実 験 結 果
4.2.2.1.話 題 転 換 の タ イ ミ ン グ
4.2.2.2.話 題 転 換 の 内 容4.2.2.3
5.お わ り に
話題転換の効果の検証
謝辞 参考文献 発表文献
1 2 2 3 4 5 6 6 7 8 5 7 7 7 0 0 4 7 7 8 8 1 4 7 8 9 2 1 1 1 1 2 2 2 2 2 2 2 3 3 3 3 3 4
1は じめ に
近 年,介 護 や 接 客 な どへ の 利 用 目的 で 人 間 と対 話 を 行 うエ ー ジ ェ ン トの 研 究 が 活 発 に 行 わ れ る よ う に な っ て き て い る[1][2].対 話 工 一 ジ ェ ン トの 中 で も,何 ら か の 目的 を 持 っ て 対 話 を 行 う タ ス ク 指 向 形 対 話 工 一 ジ ェ ン トに 関 す る研 究 は 一 定 の 成 功 を 収 め て い る[3].し か し,特 に 目的 を 持 た ず 雑 談 を 行 う非 タ ス ク 指 向 型 の 対 話 工 一 ジ ェ ン トは, NTTド コ モ の 雑 談 対 話API1な ど手 軽 に利 用 可 能 な も の も 増 え て き て い る が,研 究 は ま だ 発 展 途 上 の 段 階 に あ る と い え る.対 話 工 一 ジ ェ ン トが 行 う雑 談 に お い て は 幾 つ か の 課 題 が あ り,そ の 一 つ が 適 切 に 発 言 の 意 味 を 理 解 で き な い と不 自然 な 応 答 を 返 して し ま う場 合(対 話 の 破 綻)が 存 在 す る 事 で あ る.こ の 原 因 と し て タ ス ク 指 向 型 に お い て は 限 られ た 範 囲 で の 話 題 を 扱 え ば よ い の に 対 し,非 タ ス ク 指 向 型 に お い て は 多 様 な 話 題 を 扱 う必 要 が あ る た め,個 々 の 話 題 に 対 す る 準 備 が 不 十 分 に な っ て し ま う こ と が 挙 げ られ る [4].既 存 の 対 話 工 一 ジ ェ ン トを 利 用 す る 研 究 で 多 く用 い られ て い る簡 易 的 な 対 話 工v・ ・ 一 一 一 ・ ジ ェ ン トに お い て 特 に こ の 問 題 は 大 き い.
本 論 文 で は,簡 易 的 な 対 話 工 一 ジ ェ ン トを 対 象 と して,対 話 が 破 綻 した 場 合 の 検 出 手 法,お よ び 対 話 を 継 続 させ る た め の 対 策 と し て 話 題 転 換 を 行 う手 法 に つ い て 提 案 す る.
対 話 破 綻 の 検 出 に 関 して は,破 綻 した 応 答 に 対 して は 話 者 の 応 答 ま で の 時 間 が 長 く,ま
た 応 答 の 長 さ が 短 く な る 傾 向 が 見 られ た た め,こ れ ら に 基 づ く判 断 指 標 を 提 案 す る.話
題 転 換 に つ い て は,あ る 程 度 の 関 連 性 を持 つ 話 題 が 人 同 士 の 対 話 で 最 も 多 く行 わ れ て い
る た め,あ る程 度 の 関 連 性 を 持 っ た 話 題 に 転 換 す る こ とが 望 ま し い と仮 定 す る.あ る 程
度 の 関 連 性 を 持 っ た 話 題 と し て は,同 時 期 に 流 行 した 事 柄 や 共 通 の 原 因 を 持 つ 話 題 な ど
が あ げ られ る.こ れ ら は 時 間 的 な 関 連 性 を 持 っ て い る 場 合 が 多 い と推 測 で き る た め,こ
れ ら の 話 題 を 取 得 す る た め に,動 向 情 報 と ソ ー シ ャ ル メ デ ィ ア の デ ー タ を 利 用 した 発 見
手 法 を 提 案 す る.対 話 工 一 ジ ェ ン トと の 対 話 を行 う実 験 を 行 い,提 案 す る判 断 指 標 お よ
び 話 題 転 換 手 法 の 有 効 性,及 び 課 題 に つ い て 考 察 す る.
2関 連 研 究
2.1対 話 工 一 ジ ェ ン ト
対 話 工 一 ジ ェ ン トに は 特 定 の 事 柄 を 目 的 と し た タ ス ク 指 向 型 の 対 話 工 一 ジ ェ ン ト [4][5]と,雑 談 の よ うな 対 話 自体 を 目的 とす る 非 タ ス ク 指 向 型 の 対 話 工 一 ジ ェ ン ト[6][7]
が あ る.タ ス ク 指 向 型 の 対 話 工 一 ジ ェ ン トに は,観 光 案 内 を 目 的 と し た も の[8]や バ ス の 運 行 情 報 の 案 内 を 目的 と し た も の[9]な ど が 存 在 す る.タ ス ク 指 向 型 の 対 話 工 一 ジ ェ ン トに お い て は,対 話 を 通 し て 達 成 し た い 何 らか の 目的 を ユ ー ザ 側 が も っ て い る た め, 対 象 タ ス ク の 達 成 を 重 視 し,話 題 と し て は 対 象 と な る タ ス ク に 関 連 す る 事 柄 に つ い て 主 に 扱 う.ま た,タ ス ク の 達 成 が 目的 と な る た め,対 話 時 間 は 短 い ほ うが 良 い と され る[10].
非 タ ス ク指 向 型 に お い て は,娯 楽 と して の 雑 談[11]や 老 人 の 話 し相 手[12]な ど,対 話 そ の も の を 主 な 目的 と して お り,ア ン ケ ー ト[13]や 対 話 の 共 起 情 報[14],対 話 の 構 造[15]
等 に 基 づ き,主 に 対 話 と して 成 立 し て い る か 否 か に よ っ て 評 価 さ れ て い る.雑 談 を 行 う 非 タ ス ク指 向 型 で は も ち ろ ん,何 ら か の 目 的 を 持 っ た 対 話 を 行 う タ ス ク 指 向 型 で あ っ て
も,対 話 相 手 が 話 す こ と を 好 む 場 合,信 頼 の 獲 得 な ど に 雑 談 は 有 用 で あ る と され て い る [16].ま た,信 頼 性 の 獲 得 とい っ た 間 接 的 な 場 合 だ け で な く,シ ス テ ム 側 に 何 ら か の 意 図 が あ り対 話 相 手 に 何 か を 訴 え た い と い っ た 直 接 的 な 場 合 に も,雑 談 を 通 し て 狙 い の 話 題 へ と誘 導 す る こ と で 目的 を 達 成 す る こ と が 可 能 で あ る[17].こ うい っ た 非 タ ス ク指 向 型 の 部 分 を 持 つ タ ス ク 指 向 型 工 一 ジ ェ ン トと して は,代 表 的 な も の にAppleのSiri2や NTTド コモ の し ゃ べ っ て コ ン シ ェ ル3な ど と い っ た 音 声 ア シ ス タ ン ト機 能 が あ げ られ る.
雑 談 を 行 うエ ー ジ ェ ン トが 用 い る手 法 と して は,大 き く分 け て 機 械 学 習 な ど に よ っ て 文 章 を 自動 生 成 す る 手 法[18]と,あ らか じ め 用 意 した テ ン プ レー ト とユ ー ザ 発 話 を 照 合 して 応 答 を 生 成 す る 手 法[19]の2つ が あ る.こ の 内 現 状 で は 後 者 が 一 般 的 に 用 い られ て お り,NTTド コ モ の 雑 談 対 話API4な ど簡 単 に 利 用 可 能 な も の が 開 発 され て い る.こ の 様 な,発 話 の 意 味 理 解 に 基 づ か な い 簡 易 的 な 対 話 工 一 ジ ェ ン トで あ っ て も,ロ ボ ッ トや バ ー チ ャ ル エ ー ジ ェ ン トな ど と組 み 合 わ せ る こ と で あ る 程 度 実 用 的 な サ ー ビ ス を 提 供 す る こ と が 可 能 で あ る が,問 題 点 や 不 十 分 な 点 も 多 い こ とが 指 摘 され て い る.
2http://www
.apPle.com/jp/ios/siri/
3https://www
.nttdocomo.cojp/service/shabette ̲concier/
4htな)s://dev
.smt.docomo.ne.jp/?p=docs.api.page&api̲name=dialogue&p̲name=api̲usage̲scenario
2.1.1対 話 破 綻
対 話 工 一 ジ ェ ン トに よ る 雑 談 に お け る 問 題 点 の 一 っ と し て,発 話 の 意 味 理 解 を 行 わ ず に 応 答 を 返 す た め に,し ば しば 不 自然 な 応 答 を 生 成 し て しま う こ とが 挙 げ られ る.こ の 問 題 は 特 に,多 く用 い られ て い る簡 易 的 な 対 話 工 一 ジ ェ ン トに お い て 大 き い.不 自 然 な 応 答 を す る とユ ー ザ の 円 滑 な 対 話 を 妨 げ る た め,そ の 発 生 を な る べ く抑 制 す る こ と が 必 要 で あ り,研 究 が 進 め られ て い る.不 自然 な 応 答 に 関 し て は,東 中 ら に よ る,対 話 が 不 自 然 な 状 況 に あ る パ タ ー ン を 分 類 し た 研 究[20]や,稲 葉 ら の BLSTM‑RNN(BidirectionalLongShortTermMemoryRecurrentNeuralNetwork)を
用 い た 対 話 破 綻 の 検 出 の 検 証[21]の よ うに,対 話 破 綻 に 関 す る研 究 が 活 発 に 行 わ れ て い る.対 話 破 綻 と は,当 該 の 発 話 の 後 対 話 を 継 続 す る こ と が 難 しい 発 話 の こ と を 指 す.前 者 の 研 究 で は,大 量 の 対 話 文 を破 綻 して い る 文 章 と し て い な い 文 章 に 分 類 し,破 綻 して い る 文 章 に 共 通 す る 特 徴 を 特 定 す る こ とで 対 話 破 綻 の 検 知 へ の 応 用 を 試 み て い る.後 者 で は,BLSTM‑RNNに よ る 検 出 ミ ス を 検 証 し,よ り精 度 の 高 い 破 綻 検 出 を 試 み て い る.
ま た,対 話 破 綻 検 出 の 精 度 の 向 上 を 目的 と し て 対 話 工 一 ジ ェ ン ト と の 対 話 記 録[22]を 用 い た 対 話 破 綻 チ ャ レ ン ジ と言 っ た 試 み も行 わ れ て い る.こ の 対 話 破 綻 チ ャ レ ン ジ で は, 精 度 が 高 い 手 法 で も 破 綻 した 発 話 の 検 出 精 度 は50%程 度 に と どま っ て お り,今 後 の 改 善 が 期 待 され て い る.
さ ら に,対 話 破 綻 を 検 出 し た 後 に ど の よ う に 対 応 す る か の 研 究 は 著 者 らの 知 る 限 り少
な く,現 状 で は 発 話 内 容 を 繰 り返 す,当 た り障 りの な い 応 答 を す る と い っ た 対 応 が 主 に
な っ て い る.
2.1.2話 題 転 換
話題 転換で は,前 項 で述べ た対話破綻 時の対応 以外 にも,例 えば対話 時の話題 展開 に も利用 可能で あ り,対 話工一 ジェ ン トの応答 の多様性 を増 し,単 調 さを解 消す るの にも 貢献す る.話 題 展開 に関す る研 究 としては,検 索エ ンジンの検索結果 を用 いて話題 転換 し話題展 開 を行 う手法[23]や,固 有名詞 の置 き換 えに よって話題展 開 を行 う手法[24]な どの よ うに幾つかの研究が行 われて いるが,そ の数 は多 くない.前 者 の研究 では発 話内 容 か ら名詞 を抽 出 し,そ の検索結果 のスニペ ッ トか ら得 られ た文章 をテ ンプ レー トに当 てはめて話題転換 を行 うことで話題 の展開 を試み る.ま た後者 の研 究では,発 話 の分散 表現 を計算 し,ユ ーザの発話 に含 まれ る固有名詞 をその固有名詞 と似たベ ク トル を持つ 単語で置 き換 えて話題展 開 を試 みてい る.
これ らの話題展 開手法 におい ては,例 えば後者 の手 法で挙 げ られ ていた発話例 で は
「 朝はパ ンが食べ たいです」とい うユーザ の発話 に対 して 「 朝はチー ズも食べ たいです 」 といった応 答 を生成 している.こ の よ うに,話 題 が移 る対象 としてはそれ までの話題 と かな り近い ものを想定 してい る.よ り関連性 の低い話題 へ転換す る ことがで きれ ば,対 話 にお ける意外性 を演 出す る効果 が期待 でき る.ま た,本 項で紹介 した よ うな近い話題 へ の転換 方法 と併用す るこ とで,対 話 工一ジ ェン トの応 答 をよ り多様 にす る ことも可能
と考 え る.
2.2関 連 す る情 報 の 取 得
専 門 用 語 集 の 自動 編 集 や 連 想 検 索 な ど を 目 的 と し て,関 連 す る 単 語 や 情 報 の 取 得 に 関 す る 研 究 が 行 わ れ て い る.佐 々 木 ら は,特 定 の2単 語 の 関 連 度 をWeb検 索 の 結 果 か ら 求 め る 手 法[25]や,web検 索 の 結 果 と 文 章 中 の 共 起 情 報 を 用 い て 関 連 す る用 語 の リス ト を 生 成 す る 手 法[26]を 提 案 して い る.こ れ ら の 手 法 で は,サ ー チ エ ン ジ ン の ヒ ッ ト数 や 文 中 の 用 語 の 共 起 情 報 を 利 用 し専 門 用 語 集 を 編 集 す る.ま た,宮 川 ら は,単 語 の 意 味 に 基 づ く連 想 検 索 を 提 案 して い る[27].こ の 手 法 で は,検 索 対 象 と な る ドキ ュ メ ン ト群 か ら単 語 を 抽 出 し,そ れ ら の 単 語 に 対 し一 般 的 な 辞 典,及 び 対 象 と な る 特 定 分 野 の 用 語 辞 典 を 用 い て 単 語 を 特 徴 ベ ク トル で 表 現 す る.ベ ク トル 間 の 距 離 か ら 単 語 や ドキ ュ メ ン ト 間 の 関 連 性 を 判 断 して い る.河 内 ら は,Wikipediaの カ テ ゴ リを 用 い て 意 外 性 の あ る 関 連 検 索 の た め の 単 語 を 見 つ け る 手 法 を 提 案 して い る[28]こ の 手 法 で は,対 象 キ ー ワ ー ド に つ い て のWikipediaペ ー ジ が 属 して い る カ テ ゴ リ を 用 い て,所 属 カ テ ゴ リが よ り多
く共 通 し て い る 単 語 群 を 取 得 し,そ れ を 関 連 単 語 と して い る.
これ ら の 手 法 を,本 論 文 の 目的 で あ る 間 接 的 に 関 連 す る話 題 の 発 見 に適 用 す る こ と を 想 定 し た 場 合,い く っ か の 課 題 が 存 在 す る と考 え る.佐 々 木 ら の 手 法 で は,指 定 し た2 単 語 に つ い て 関 連 度 を 求 め る こ と が で き る が,あ る 単 語 に 対 す る 関 連 語 を 不 特 定 多 数 の 候 補 か ら リア ル タ イ ム で 発 見 す る よ うな 用 途 に は 適 して い な い.ま た,宮 川 らや 河 内 ら の 手 法 で は 本 研 究 で 対 象 と し て い る よ うな,あ る 程 度 の 緩 い 関 連 性 を 持 つ 話 題 の 発 見 に は 適 して い な い と考 え る.そ の 理 由 は,連 想 検 索 で は,直 接 的 な 関 連 性 を 持 つ 連 想 が 目 的 で あ る こ と,Wikipediaの カ テ ゴ リ を 利 用 し た 手 法 は 意 外 性 の あ る 単 語 を 取 得 す る こ と が で き る も の の,共 通 す る カ テ ゴ リの 数 を 参 照 して い る た め,元 の 単 語 に 近 い グ ル ー プ に 属 す る 関 連 を 取 得 し て い る と 考 え られ る か らで あ る.
高 間 ら は,動 向 情 報 を 対 象 と した コ ン テ ク ス ト検 索 エ ン ジ ン を 提 案 して お り,同 時 期
に 同 様 の 変 動 を 示 し た ア イ テ ム の 発 見 な ど が 可 能 で あ る こ と を 報 告 し て い る[29】.こ の
手 法 で は,Wikipediaの ペ ー ジ 閲 覧 数 な ど の よ うに 時 間 と と も に 変 化 す る動 向 情 報 と呼
ば れ る デ ー タ が 特 徴 的 な 変 動 を 示 した 時 期,及 び 特 徴 的 な 変 動 の 種 類 を も と に ア イ テ ム
を 検 索 す る こ と が で き る.特 徴 的 な 変 動 と して は,最 大 値,最 小 値,ピ ー ク,ボ トム,
急 上 昇,急 降 下 の6種 類 が あ る.時 間 的 な 関 連 性 の あ る ア イ テ ム は,意 味 が 近 い な ど の
直 接 的 な 関 連 を 持 た な い た め,転 換 話 題 候 補 の 発 見 に 利 用 可 能 と考 え る.
3研 究概要
3.1提 案 シ ス テ ム
図1に 提 案 す る シ ス テ ム の 構 成 を 示 す.
対 話 工 一 ジ エ ン ト ・ コ ン テ ク ス ト検 索工 ン ジ ン twitter
応答 A④ ユ ーザの応答A 話題転換 ③応答から
転換先の話題を決定
〔 対 話 評価 部 「 ②破綻 小
ノ通常の応答 ①ユーザの応答 ⑤ 話 題 転 換 を行 う応 答
Ψ
( ユーザ)
図1提 案 システムの構成
提 案 シ ス テ ム で は,通 常 は 既 存 の 対 話 工 一 ジ ェ ン トを 利 用 して 応 答 を 生 成 す る.対 話 評 価 部 で は エ ー ジ ェ ン ト,ユ ー ザ 双 方 の 発 話 を 評 価 し,ユ ー ザ か らの 応 答 が あ っ た 際 に 対 話 が 破 綻 状 態 に あ る か を 判 断 す る(①).破 綻 して い る と判 断 し た 際(②)に 対 話 へ
の 介 入 を 行 い,そ れ ま で 話 して い た 話 題 を 元 に コ ン テ ク ス ト検 索 エ ン ジ ン及 びtwitter の 検 索 を 行 い,転 換 先 の 話 題 を 決 定 す る(③).対 話 制 御 部 で は コ ン テ ク ス ト検 索 エ ン ジ ン か ら得 られ た ア イ テ ム に 関 す る 話 題 を 促 す 発 話 を 生 成 し,エ ー ジ ェ ン トの 発 話 とす る.
こ の 時,対 話 工 一 ジ ェ ン ト側 に も話 題 転 換 を 認 識 させ る必 要 が あ る.こ の 処 理 は 利 用 す る 対 話 工 一 ジ ェ ン トに よ り異 な る が,今 回 利 用 し たNTTド コ モ の 雑 談 対 話APIで は, こ れ ま で の 対 話 に 関 連 付 け ら れ て い る 変 数contextの 中 身 を 一 度 リセ ッ ト し た 上 で,
「(コン テ ク ス ト検 索 エ ン ジ ン か ら取 得 した ア イ テ ム)に つ い て 話 し ま し ょ う」 と い う発 話 を ユ ー ザ の 発 話 と し て 対 話 工 一 ジ ェ ン トに も送 信 す る(④).こ の 処 理 が 終 わ っ た 後,
ユ ー ザ に応 答 を 返 す(⑤).
以 下 で は,提 案 シ ス テ ム の 主 要 構 成 要 素 で あ る話 題 転 換 の 方 法,関 連 情 報 の 発 見 方 法 に つ い て,3.1.1項,3.1.2項 で そ れ ぞ れ 説 明 す る.
3.1.1話 題 転 換
話 題 転 換 に は 以 下 の3通 りの パ タ ー ン が あ る[19].
・関 連 性 の 強 い 話 題 へ の 話 題 転 換
・例:「 地 震 」 の 話 か ら 「 防 災 」 の 話 へ の 転 換 と し て
「 地 震 に つ い て 何 か 備 え て い ま す か?」 と い う発 話
・あ る 程 度 の 関 連 性 を 持 っ た 話 題 へ の 話 題 転 換
・例:「 地 震 」 の 話 か ら 「自転 車 」 の 話 へ の 転 換 と し て
「 東 北 大 震 災 の 後,エ コ な 移 動 手 段 と して 自転 車 が 売 れ た そ うで す 」 とい う 発 話
・無 関 係 な 話 題 へ の 話 題 転 換
・例:「 地 震 」 の 話 か ら 「 天 気 」 の 話 へ の 話 題 転 換 と して
「と こ ろ で,最 近 雨 が 続 き ま す が 明 日は 晴 れ る の で し ょ うか 」 と い う発 話
この内,関 連性 の強い話題へ の話題転換 は,小 さな齪齪 を修 正す る場合や,あ るい は
破綻 の修正 でな く同 じ話題 が連続 した場合 のア クセ ン トとして話題転換 を行 う場合 は
有効 であ るが,本 来 の対話 内容 と大 きくか け離れてい る場合 には間違 った話題 をその ま
ま続 け,対 話 が破綻 した状態 を継続 して しま う可能性 が考 え られ る.ま た,無 関係 な話
題へ の話題転 換は,話 題 が一段落 した時に別 な話題 を提示す るときには適 してい るが,
それ以外 の場合 において は破綻 として感 じられ る場合が ある[12].一 方,あ る程度の 関
連性 を持 った話題 へ の話題転換 は人 間同士の対話で最 も多 く行 われ る[19]た め,話 題転
換 の必要性 がな い状 態 の時に話題転換 して しま って も通常 の対 話 と受 け止 め られ さほ
ど悪影響 を及 ぼ さない と考 え られ る.ま た,対 象 となる話題 に近 い話題 を続 けたい場合
には適 さない ものの,歯購吾があった場合の修正 には適 してお り,話 題 が一段落 した時 の
話題転換 に も不 自然 にな らず使 用が可能 と考 え られ る.こ れ らの理 由に よ り,提 案 シス
テ ムでは この タイプ の関連 を持 つ話題 による話題 転換 を行 う.
とによる話題転換 な どが考 え られ る.こ の うち偶然 出現 した単語 による話題転換 は,場 合 によって は後述 の対話破綻 のパ ター ンで あるユーザ発言 内容 の無視 になって しま う
た め,提 案 システ ムでは流行や 共通 の原 因に関す る話題 転換 を主 に扱 う.同 時期に流行 した話題や共通 の原 因によって生起 した事柄 に関す る話題 は,対 応す る動 向情報 が似 た 変動 を示す場合が ある と考 え,動 向情報 を用いた話題 の検索 を行 うことによ り関連話題 の発 見 を試み る.
3.1.2関 連 情 報 の 検 索
前 項 で 述 べ た 通 り,提 案 シ ス テ ム で は,近 い 時 期 に 動 向 情 報 が 類 似 し た 特 徴 的 変 動(急 上 昇 な ど)を 示 し た ア イ テ ム 間 は 何 らか の 関 係 が あ る と想 定 し,関 連 情 報 候 補 の 絞 込 を 行 う.な お,こ こ で い う動 向 情 報 と は,例 え ばWikipediaの 閲 覧 数 の よ うに 時 間 と と も に 変 化 す る デ ー タ の こ と で あ る.
コ ン テ ク ス ト検 索 エ ン ジ ン[17]で は 対 象 の ア イ テ ム の 動 向 情 報 が 特 徴 的 な 変 動 を 見 せ た 時 期,ま た は 逆 に 特 定 の 時 期 に 特 徴 的 な 変 動 を 見 せ た ア イ テ ム を 検 索 す る こ とが で き る.図2は ア イ テ ム 「 地 震 」の 動 向 情 報 が 最 大 値 を 迎 え た 時 期 を 検 索 した 結 果 で あ る.
糊膿
'}苅震
でのら り つ ぞ ら つ り に ゆみ ぱ のげ じ じ
国
Resourc② 「ryp●
っい 一「ぶ るトレノlr.IAX HOTワ ー ド
"地 震 納AX@peri◎d"の 検 索 結 果
PorlOd
2G11・0301‑
2011・03。31
Ylr1りo唖 上 馨nl「AxL,Ollc'○ で
一 ト ラ キ'弓2Gll「)∩'11
Spar1く書書no了arget
コL̲
,へ
Google bccg:e
Menu
轡一し1ヤ ↑」
9TPsiA!A (t'
Gレ へ"cLI'
讐A「1
■薗、1}1.
ハ ーh寸 ・ マ 「tslt:1∫ そ
図2コ ン テ ク ス ト検 索 エ ン ジ ン
ま た,2.2節 で 述 べ た 通 り,特 徴 的 な 変 動 の タ イ プ と し て,最 大 値,最 小 値,急 上 昇, 急 降 下,ピ ー ク,ボ トム の6種 類 の うち い ず れ か を 指 定 して 検 索 で き る.各 特 徴 的 変 動
に つ い て 表1に ま と め る.
表1各 特 徴 的 変 動 の ま と め(文 献[14]か ら 引 用)
最大値 各動 向が最大値 を取 る月 最小値 各動 向が最小値 を取 る月
急上昇 3ヶ 月 以 内 に,そ の 動 向 情 報 の1最 大 値 最 小 値1の 1/5以 上 の 単 調 増 加 が 見 られ る期 間
急降下 3ヶ 月 以 内 に,そ の 動 向 情 報 の1最 大 値 最 小 値1の 1/5以 上 の 単 調 減 少 が 見 られ る期 間
ピ ー ク そ の 動 向 情 報 の1最 大 値 一 最 小 値1の
1/10以 上 の 単 調 増 加 が 見 ら れ た 後,減 少 に 転 じ た 期 間 ボ トム そ の 動 向 情 報 の1最 大 値 一 最 小 値1の
1/10以 上 の 単 調 減 少 が 見 られ た 後,増 加 に 転 じ た 期 間
本 論 文 で は そ れ ま で の 話 題 に 対 応 す る ア イ テ ム の 動 向 情 報 が 最 大 値 を 迎 え た 時 期 と 同 時 期 に,同 様 に 最 大 値 を 迎 え た ア イ テ ム を 検 索 し,そ れ を 関 連 ア イ テ ム の 候 補 とす る.
図3は ア イ テ ム 「地 震 」 の 動 向 情 報 が 最 大 値 を 迎 え た 時 期 に,同 じ よ う に 最 大 値 を 迎 え た ア イ テ ム を 検 索 した 結 果 で あ る.こ の 検 索 結 果 の 中 で は,例 え ば ミネ ラ ル ウ ォ ー タ ー は 地 震 に よ る 水 不 足 や 買 い 占 め の 影 響 で 普 段 は あ ま り売 れ て い な い の に 品 薄 に な っ た,
と い っ た 間 接 的 な 関 連 性 が あ る.
国
"地 震MAX@ltem"の 検 索 結 果
魏e鵬RosourCO「 呼peP●nOCt
軍 寧 電 力Gooqle↑renasr1AX201103‑01
2011‑03弓1
i:ざ 梱i即nll「"AX:ll:;鰍
R巨 勤GOOgleTrertC〜 「.IAX20a1・G触01 20{1・G331
4幌 亡̀‑嚇T刑 ㌧ 目A旨1鷺G雪
Sparklme
一」L
〜 '
＼ ・t… .‑jL・ ・..、
̲」L
﹂
ハノ
Tatget GOOgle C・CCgle
'レ 蟹
Gccqpl
赫帥u
稀 →・'}?・
9了̀、 ・くL!'IA 章,
oノへ㌧rノ エ
幽 ㌧rl')1'
図3地 震 と同時期 に最 大値 を迎 えたアイテ ムの検索結果
コ ン テ ク ス ト検 索 エ ン ジ ン の 検 索 結 果 よ り得 られ た 関 連 ア イ テ ム の 候 補 か ら,実 際 に 関 連 性 を 持 つ 可 能 性 が あ る も の に 絞 り込 む た め に,twitterの 情 報 を 利 用 す る.具 体 的 に は,同 様 の 特 徴 的 変 動 が 見 ら れ た 時 期 に,直 前 ま で の 話 題 と 関 連 ア イ テ ム 候 補 の ど ち ら も キ ー ワ ー ド と し て 含 む ツ イ ー トが 最 も 多 い ア イ テ ム を 関 連 性 が あ る 単 語 と判 断 し, そ の と き に 得 られ た ツ イ ー トを整 形 して 話 題 転 換 の た め の 応 答 文 とす る.図4と 図5
に ア イ テ ム 「 地 震 」の 動 向 情 報 が 最 大 値 を 迎 え た 期 間 で あ る2011年3月1日 か ら2011 年3月31日 の 間 に,「 地 震 」 及 び 同 様 に 最 大 値 を 迎 え て い た ア イ テ ム で あ る 「JR東 日 本 」 の 両 方 を含 む ツ イ ー トの 例 を 示 す.
2011年3月31日AM7:05謹 ん で 地 震 災 箸 の お 見 舞 い を 申 し上 げ ま す 。 お は よ うご さ い ま す 。 今 朝 の 湘 南 も 波 あ りま せ ん 。 鵠 沼 で イ ン サ イ トよ りの ス ネ 。 テ イ ク オ フ も 厳 しそ う 。 後 の ボ イ ン トも 湖 状 態 の フ ラ ッ トで す 。 風 は オ フ シ ヨ ア 。 隻 活 リ ン クJR東H本 小 田 急 電 鉄 東 京 電 力 藤 沢 市 茅 ヶ 崎 市
図42011/03/01‑2011/03/31の 間 の 「 地 震 」 と 「JR東 日 本 」 の 両 方 を 含 む ツ イ ー ト
JR東 日 本 、 地 震 に よ る 列 車 影 響 と 運 転 見 込 み に つ い て(30日)本 冨 福 島 岩 沼 が4 月 上 旬 、 密 沼 一 仙 台 か4/2撫pOllw職1トtabi.C◎mleq.html#fukushlmadai
図52011/03/01・2011/03/31の 間 の 「 地 震 」 と 「JR東 日 本 」 の
両 方 を 含 む ツ イ ー ト
こ の うち,図4で 示 し た ツ イ ー トで は,「JR東 日本 」 が ツ イ ー トの 内 容 と は 関 係 な い た め,両 キ ー ワ ー ドの 間 に 関 連 は な い と い え る.こ の 様 な ツ イ ー トを 除 去 す る 単 純 な 手 法 と して,本 論 文 で はYahoo!Japanの キ ー フ レー ズ 抽 出5を 用 い た 判 定 を 行 う.'Yahoo!
Japanの キ ー フ レ ー ズ 抽 出 で は,送 信 さ れ た 文 章 を解 析 し特 徴 的 な フ レー ズ を ラ ン ク付 け して 最 大 で 上 位20フ レー ズ ま で を 返 す.こ の 抽 出 結 果 に 両 方 の ア イ テ ム が 含 ま れ て い る場 合,関 連 性 を 示 す ツ イ ー トと し て 扱 い,関 連 性 を 示 す ツ イ ー トが 最 も 多 い ア イ テ ム を 関 連 す る ア イ テ ム とす る.図6と 図7に,上 図 の 各 ツ イ ー トに 対 して キ ー フ レー ズ 抽 出 を 行 っ た 結 果 を 示 す.
図6の キ ー フ レー ズ 抽 出 結 果 を 見 る と,キ ー ワ ー ド と して 抽 出 され て い る の は 「地 震 」
「JR東 日本 」 で は な く 「05謹 ん で 地 震 災 害 」 「 生 活 リ ン クJR東 日本 小 田急 電 鉄 」 と な っ て い る.こ れ よ り,図7の 抽 出 結 果 の よ うに 「地 震 」 「JR東 日本 」 と 直 接 抽 出 され て い る ツ イ ー トよ り もそ れ ぞ れ の 単 語 同 士 の 関 連 性 が 小 さ い と 判 断 して 除 外 す る.
5http://developer .yahoo.co.jp/webapi/jlp/keyphrase/vl/extract.html
▼<ReSU垂t>
1欝1購 麟 溜 燃 躰 佃 急験 く/'eyph「ase>
<IResuit>
▼ 〈Re$ul乏 〉
<keyphrase>テ イ ク オ フ 〈!1<eyphra$e>
〈Sc◎re>?1〈/Sc◎re>
〈ノ 喋〜es疑 韮t>
▼ 〈Result>
<keyphrase>イ ン サ イ ド〈!絶yphrase>
<Score>6?</Sc◎re>
</Resu葬t>
▼<Result>
〈keyphrase>OS講 ん で 地 震 災 審 く/keyphrase>
〈Score>52〈!Score>
〈!Resりlt>
▼ 〈Resu縫 〉
〈Keyphrase>鵠i召 〈/keyphrase>
<Score>51<!Score>
</事〜eSU曇t>
▼ 〈ReSUlt>
〈猟eyphrase>201峰3月31臼AM7〈/陶phrase>
〈Score>50〈/Score>
〈Mesult>
▼ 〈Re$ult>
<1〈eyphr鵠e>お 見 舞 い</Keyphrase>
<Score>49〈/Scere>
〈ノRe$し 薩t>
▼<Result>
<Keyphrase>ス ネ</keyphrase>
〈Score>47</Score>
〈ノReSU暑 隻〉
▼ 〈Resu穫t>
<沁 ∋yphrase>獅1〈/Keyphrase>
<Sc◎re>37</Score>
〈/Resul乏 〉
▼ 〈臼esult>
〈1〈eyphrase>湖 状 態</leyphrase>
〈Score>34〈!Score>
〈/Res疑1之 〉
▼ 〈ReSUlt>
〈Keyphrase>ポ イ ン ト</keyphra$e>
<Score>33〈/Score>
</Result>
▼ 〈kOsult>
〈Xeyphrase>今 朝 〈/Keyphrase>
<$cere>25</Sc◎re>
〈ノ事 〜es媛lt>
▼ 〈Resuit>
<keyphrase>波</teyphrase>
〈Score>23〈/Score>
</Resりlt>
▼<Result>
〈Keyphrase>風<!xeyphrase>
〈Sc◎re>15〈/Score>
〈ノResuIt>
</ResultSet>
図6図4の ツ イ ー トに 対 す るYahoo!Japanの キ ー フ レ ー ズ 抽 出
▼<Resu董t>
〈聾 く 倉yph「 ・ase>」 健葉 臼 本<!5<eyphrase>
〈Sc◎re>童00〈/Score>
</Result>
▼<Resぴlt>
〈leyphrase>岩 沼 〈!Keyphrase>
〈Score>75〈/Sc◎re>
</Result>
▼ 〈ReSUi乏 〉
〈leyphrase>運 転 晃 込 み<!leyphrase>
<Score>38</Sc◎re>
〈/Resul隻 〉
▼<Result>
<㎏yphrase>本 富</翼 倉yphrase>
〈Score>38<!Score>
<!Result>
▼ 〈Res疑lt>
〈1〈eyphrase>列 藁 影 響 く/1〈eyphrase>
〈Score>32</Score>
〈/Resul隻 〉
▼ 〈ReSU縫 〉
〈絶yp偽rase>仙 台 〈/leyphrase>
<Score>25<!Sc◎re>
<ノRe$ult>
▼<Result>
<1〈eyphrase>劇 陰瑳鍵く/1〈eyphrase>
<Score>24〈/Sc◎re>
</Resuit>
▼<Resぴlt>
〈keyphrase>福 島</leyphrase>
〈Sc◎re>24〈/Sc◎re>
〈ノResu奪 吏〉
▼ 〈Result>
〈leyphrase>4月 上 句 くノkeyphra$e>
<Score>23</Sc◎re>
</Resしllt>
▼ 〈Re$u韮t>
<1〈eyphrase>30Eヨ 〈/純≧yphrase>
〈Score>7〈/Sc◎re>
〈Me$ult>
<ノRe$1」ltSet>
図7図5の ツ イ ー トに 対 す るYahoo!Japanの キ ー フ レ ー ズ 抽 出
3.2対 話 破 綻 の 検 出 指 標
対 話 が 破 綻 して い る発 話 の 特 徴 と して は,以 下 の5つ が 挙 げ られ て い る[8】.
・同 じ 内 容 の 繰 り返 し
・例:エ ー ジ ェ ン トが 「 美 味 しい で す ね 」 「 い い で す ね 」 の よ うに 似 た 発 話 を 繰 り返 す
・矛 盾 した 内 容
・例:エ ー ジ ェ ン トが 「 い ち ご が 好 き 」 の 後 に 「い ち ご が 嫌 い 」 と発 話 す る
・発 話 と し て 唐 突
・例:「 お は よ う ご ざ い ま す 」 に 対 し 「あ け ま して お め で と う ご ざ い ま す 」 と返 す
・ユ ー ザ 発 言 内 容 の 無 視
・例:旅 行 の 話 題 で 「 車 で 行 き ま し ょ う」 と い うユ ー ザ の 発 話 に 対 し,
「車 は か っ こ い い で す ね 」 と 車 そ の も の に つ い て 言 及 す る
・質 問 に 答 え て い な い
・例:「 チ ワ ワ は 欲 し い で す ね 」 と い う シ ス テ ム の 発 話 に 対 しユ ー ザ が
「 飼 う予 定 は あ る の?」 と 聞 い た が 「 チ ワ ワ は い い ら し い で す よ 」 と返 す
しか し,こ の よ うに発 話内容で対話破綻 を検 出 し話題転 換 を行お うとした場合,ル ー ル と しては対話破綻 と判 断 され るもの の対話が継続可能 な範 囲であ る場合や,対 話 とし ては本来成立 して い るものの,ユ ーザ側 の知識 にないため対話が滞 る場合 な どを判 断す る ことが困難 である.ま た適 切 に話題転換 を行 うことができていたか とい った,エ ージ ェ ン ト発 話の評価 に用 いる こ とがで きない と考 える.
そ こで,適 切 なタイ ミングで話題転換 を実行,及 び話題 転換が適切 であったかを評価 す るために,本 論文 では発話 内容で はな く,ユ ーザ の反応 に基づいて対話破綻 を検 出す る ことを試 み る.
話題転 換 を伴 わない,対 話 工一 ジェン トとの通 常の対話 を行 う予備 実験 を行 った とこ
ろ,破 綻 した応答 をエー ジェ ン トが返 した際 はユーザが応答 を返す までの時 間が長 く,
ま た応 答 そ の もの も短 くな る傾 向 が観 測 され た.そ こで本 論 文 で は,ユ ー ザ が対 話 工 一
ジェ ン トの発 話 に対 し応答す るまでの時間,及 びそ の応答 の長 さに基づ く対話破綻検 出
字 と した と き,ti1を 指 標 とす る.こ の 値 が 大 き い 場 合 に 対 話 が 破 綻 し て い る と判 断 す る.こ の 指 標 を 本 論 文 で は 文 字 当 た り応 答 時 間 と 呼 ぶ.
も う一 つ は,ユ ー ザ に よ る 応 答 の 単 語 数 を 陀 と し た と き,伽 を 指 標 とす る.こ の 値
が 大 き い 場 合 に 対 話 が 破 綻 し て い る と判 断 す る.こ の 指 標 を 本 論 文 で は 単 語 あ た り応 答
時 間 と呼 ぶ.4章 で は,両 指 標 の 有 効 性,及 び そ の 違 い に つ い て も 検 証 す る.
4実 験
4.1予 備 実 験 4.1.1実 験 概 要
提 案 シ ス テ ム 及 び 対 話 破 綻 の 検 出 指 標 の 有 効 性 や 課 題 を 調 査 す る こ と を 目的 と し て, 予 備 実 験 を 行 っ た.本 実 験 で は,既 存 の 対 話 工 一 ジ ェ ン トとユ ー ザ と の 対 話 に 介 入 し話 題 転 換 が 可 能 で あ る こ と,及 び 提 案 す る 指 標 に よ り対 話 破 綻 が ど の 程 度 検 出 可 能 で あ る か を 確 認 す る.
対 話 の 開 始 前 に,実 験 協 力 者 に コ ン テ ク ス ト検 索 エ ン ジ ン の 検 索 結 果 の う ち,2006 年 か ら2014年 の 間 に 動 向 情 報 が 最 大 と な っ て い る ア イ テ ム を 提 示 し,そ の 中 か ら話 題
と した い も の を 選 択 して も らい,対 話 工 一 ジ ェ ン ト と対 話 を 行 っ て も ら っ た.な お こ の 時,一 般 的 で な い 話 題 だ と対 話 工 一 ジ ェ ン ト との 対 話 が 最 初 か ら破 綻 して しま う場 合 が あ る た め,な る べ く一 般 的 と思 わ れ る 単 語 を 話 題 と して 選 択 す る こ と,固 有 名 詞 や 名 詞 以 外 の ア イ テ ム は 避 け る こ と を 指 示 し た.
対 話 時 に は,表2に 示 す 対 話10箇 条 を も と に し た 方 針 に 基 本 的 に は 従 っ て も ら っ た.
た だ し,話 題 転 換 の 効 果 を 見 る た め の 実 験 で あ る た め,な る べ く 実 験 協 力 者 の 側 か ら の
話 題 転 換 は 行 わ な い よ う に 指 示 し た.従 っ て,(5)は 実 験 協 力 者 に 指 示 して い な い.
表2対 話10箇 条(文 献12か ら 引 用)
(1) た ま た ま 待 合 室 や 飛 行 機 な どで 隣 り合 っ た 見 知 らぬ 人 と話 す イ メ ー ジ で 対 話 しま し ょ う.特 定 の 個 人 を想 定 して 対 話 を行 わ な い よ うに 注 意 して くだ さい.
(2) シ ス テ ム の 発 話 は な るべ く好 意 的 に 解 釈 し,対 話 を 続 け る よ うに努 力 しま し ょ う.
シ ス テ ム の 力 量 を試 す よ うな 発 話 は 控 え て く だ さい.ま た,長 文 の 入 力 や,人 間 で も答 え に く い よ うな難 しい 問 い か け は避 け て くだ さい.
(3) 対 話 ご と に新 しい 気 持 ち で話 しま し ょ う.残 念 な が ら,シ ス テ ム は前 の あ な た との 対 話 を覚 え て い ま せ ん.新 しい 対 話 セ ッ シ ョ ンで は,前 回 の 対 話 の こ と は 忘 れ て 対 話 して くだ さい.
(4) 自分 か ら話 題 を 開 始 しま し ょ う.シ ス テ ム は,話 題 とな る 単 語(主 に 名 詞)が あ る と,そ の 単 語 に つ い て 対 話 を行 う こ とが で き ま す が,そ の よ うな 単 語 が 見 つ か らな い と うま く対 話 が で き な い こ とが あ りま す.シ ス テ ム か ら話 題 を 振 られ る の を 待 つ の で は な く,自 分 か ら話 題 を振 りま し ょ う.な お,マ ニ ア ッ ク な 話 題 に は うま く対 応 で き な い こ とが あ りま す.
(5) 自分 か ら話 題 を 変 え ま し ょ う.シ ス テ ム は,自 分 か ら話 題 を 変 え る こ と を あ ま り し ま せ ん.対 話 が 進 展 し な か っ た り,シ ス テ ム が 良 く わ か らな い 応 答 を繰 り返 した り す る よ うな と き は,自 分 か ら新 しい話 題 に 変 え て み ま し ょ う.
(6) 何 度 も 同 じ こ と を繰 り返 さ な い よ うに しま し ょ う.シ ス テ ム の 理 解 力 が 対 話 中 に 突 然 改 善 す る こ とは あ りま せ ん.あ る発 話 に つ い て 満 足 の 行 く 回 答 が 得 られ な くて も,
シ ス テ ム に 対 して,同 じ質 問 や 発 話 を繰 り返 した り し な い よ うに しま し ょ う.
(7) 誹 諺 中 傷 は 避 け ま し ょ う.こ こ で 収 集 して い るデ ー タ は 公 開 され ま す.デ ー タ を 見 た 人 が 不 快 に な る よ うな発 言 は 避 け て 下 さ い.誹 諺 中傷 とは,シ ス テ ム に 対 す る も
の,特 定 の 個 人 に 対 す る も の の 両 方 を含 み ま す.
(8) 個 人 情 報 を入 力 し な い よ うに しま し ょ う.公 開 され るデ ー タ で あ る こ とを 念 頭 に 置 い て,名 前,住 所,電 話 番 号 な ど の 個 人 情 報 は発 話 に含 め な い で く だ さ い.第 三 者
の 個 人 情 報 の入 力 は 絶 対 に や め て くだ さい.
(9) 日本 語 で入 力 しま し ょ う.シ ス テ ム は 日本 語 しか 理 解 で き ま せ ん,ま た,大 阪 弁 や 博 多 弁 な ど の 方 言 に も対 応 して い ま せ ん の で,標 準 語 で 入 力 して くだ さい.顔 文 字 ・
フ ェ イ ス マ ー ク な ど も理 解 で き ま せ ん の で 使 用 しな い で く だ さい.
(10) 上 記 を 守 っ て い れ ば,あ と は 自 由 で す.対 話 を 楽 しみ ま し ょ う.
対 話 時 間 は1回 あ た り5分 で,途 中 で 不 自然 な 発 話 を 行 っ て い た と シ ス テ ム 側 で 判 断 し た 場 合 に 話 題 転 換 を 行 っ た.話 題 転 換 は,1回 の 対 話 に お い て1度 だ け 行 う よ う に し, そ の 後 は 話 題 転 換 を 行 わ な い よ うに 設 定 し た.こ の 様 に 設 定 した 理 由 は,コ ン テ ク ス ト 検 索 エ ン ジ ン に は 例 え ば 「 未 だ に 」 の よ う に名 詞 以 外 も 登 録 され て し ま っ て い る た め, 話 題 転 換 を 行 っ た 後 の 話 題 が コ ン テ ク ス ト検 索 エ ン ジ ン に 登 録 され て い な い 場 合 が あ る た め で あ る.ま た,5分 が 経 過 し て も 対 話 破 綻 を 検 出 し な か っ た 場 合 は,話 題 転 換 を 行 わ ず 終 了 す る よ う に 設 定 し た.な お,3.2節 で 提 案 した 指 標 の 有 効 性 検 証 に 必 要 な デ ー タ を 収 集 す る こ と も実 験 の 目的 で あ っ た た め ,提 案 す る指 標 で は な く,ほ ぼ 同 じ内 容 の 発 話 が 連 続 した 場 合 に 対 話 が 破 綻 した と判 断 して 話 題 転 換 を 行 っ て い る.
そ れ ぞ れ の 対 話 終 了 後 に,自 然 と感 じた 発 話 ・不 自 然 と感 じ た 発 話,及 び 話 題 転 換 が 行 わ れ た こ と に 気 付 い た か 否 か に 関 す る ア ン ケ ー トを 行 っ た.
ア ン ケ ー トの 質 問 内 容 は 以 下 の3つ で あ る.
・対 話 が お か し く な っ た と感 じ た 部 分 は あ り ま し た か あ っ た 場 合 は 該 当 す る 発 話 の 時 間 を 答 え て くだ さ い.
・自然 な 応 答 と感 じ た 部 分 は あ りま した か
あ っ た 場 合 は 該 当す る発 話 の 時 間 を 答 え て く だ さ い.
・話 題 の 転 換 に 気 づ き ま し た か .
気 づ い た 場 合 は,転 換 後 の 話 題 とそ れ ま で の 話 題 に 関 連 性 が あ る と感 じ ま し た か.
実 験 は 工 学 系 学 部 生 ・院 生8人 に 協 力 して も らい,1人 あ た り3回 で 計24回 の 実 験
を行 っ た.
4.1.2実 験 結 果
4.1.2.1対 話 破 綻 検 出 指 標 の 評 価
対 話 の 記 録 と ア ン ケ ー トの 結 果 か ら,対 話 工 一 ジ ェ ン トの 発 話 を 自然 な 発 話 と不 自然 な 発 話 に 分 類 した.そ れ ぞ れ の タ イ プ の 発 話 に つ い て,3.2節 で 提 案 し た 文 字 当 た り応 答 時 間,及 び 単 語 あ た り応 答 時 間 の 平 均 値 を 実 験 協 力 者 毎 に 求 め た 結 果 を 表1,表2に 示 す.表 に お い て,括 弧 内 に 示 し た 値 は,外 れ 値 を 除 去 して 求 め た 平 均 値 で あ る.こ こ
で,実 験 協 力 者 が 実 験 時 に 使 用 し た キ ー ボ ー ドに 不 慣 れ だ っ た た め に 必 要 以 上 に 入 力 に
時 間 を か け て しま う場 面 が 見 られ た た め,第3四 分 位 数 に 四 分 位 範 囲 の1.5倍 を加 え
た 値 を 越 え て い る 要 素 を 外 れ 値 と判 断 し て い る.
表3:文 字 当 た り応 答 時 間 の 平 均 値([s/字])
実験協力者 自然 不 自然
A 2.16
(1.65)
2.32 (2.32)
B 2.11
(2.11)
3.98 (2.94)
C 3
(3)
7.6 (7.6)
D 3.57
(2.32)
3.25 (3.25)
E 1.93
(1.93)
4.87 (3.27)
F 2.01
(2.01)
2.75 (2.43)
G 5.52
(1.76)
3.17 (2.70)
R 1.53
(1.53)
2.15
(1.60)
表4:単 語 あ た り応 答 時 間 の 平 均 値(【s/単語])
実験協力者 自然 不 自然
A 6.23
(6.23)
5.15 (5.15)
B 3.33
(3.33)
9.16 (8.95)
C 4.2
(4.2)
12.67 (12.67)
D 5.51
(5.51)
7.62 (7.37)
E 3.50
(3.50)
8.83 (8.02)
F 3.93
(3.93)
4.76 (4.76)
G 9.43
(2.90)
5.44 (4.67)
H 3.31
(3.31)
3.69
(2.76)
表3か ら,自 然 な 発 話 よ り不 自然 な 発 話 の 方 が,ど の 実 験 協 力 者 に お い て も外 れ 値 を 除 去 し た 後 の 文 字 当 た り応 答 時 間 が 大 き く な っ て い る こ と が わ か る.一 方 表4で は,実 験 協 力 者A及 び 且 に お い て は 自然 な 発 話 の ほ うが 大 き く な っ て し ま っ て い る.こ の 理 由 と し て は,例 え ば 「 そ うで す ね 」 の よ うな 対 話 が 破 綻 して い な い 状 況 で 同 意 す る場 合 に も用 い ら れ る 単 語 が1単 語 と し て 処 理 さ れ て し ま っ て い る 一 方,被 験 者 側 が エ ー ジ ェ ン トの 発 話 を 理 解 で き ず に 聞 き 返 す 「え?」 と い っ た 発 話 が2単 語 と して 数 え られ,文 字 数 を 利 用 した 場 合 と評 価 が 逆 転 して し ま っ た 場 合 が 存 在 した.ま た,固 有 名 詞 の 形 態 素 解 析 の ミス も 結 果 に 影 響 した と考 え る.
文 字 当 た り応 答 時 間,及 び 単 語 あ た り応 答 時 間 の 違 い が 有 意 な も の で あ る か を確 か め る た め にt検 定 を 行 っ た.こ の 時,実 験 協 力 者Cに っ い て は,自 然,不 自然 の 差 が 大 き く な っ て い る が,ア ン ケ ー ト結 果 か ら 自然 ・不 自然 と判 断 され た 応 答 が そ れ ぞ れ1つ し か な く,外 れ 値 で あ る か 否 か の 判 断 が で き な い た め,除 外 して 検 定 を 行 っ た.
外 れ 値 を 除 外 し た 文 字 当 た り応 答 時 間 の 平 均 値 に 関 してt検 定 を 行 っ た 結 果,p値 は 0.0030<0.01と な り,有 意 水 準1%で 差 が 認 め られ た.以 上 よ り,文 字 当 た り応 答 時 間 は 対 話 破 綻 の 検 出 指 標 と して 用 い る こ と が で き る と 考 え る.
ま た 同 様 に 単 語 あ た り応 答 時 間 に っ い て もt検 定 を 行 っ た と こ ろ,o.0949>o.05と な り,有 意 性 は 認 め られ な か っ た.こ れ ら の 結 果 か ら,外 れ 値 を 除 去 した 場 合 の 判 別 性 能 に 関 して は 文 字 あ た り応 答 時 間 の ほ うが 優 れ て い る と い え る.
一 方 で ,外 れ 値 を 含 ん で のt検 定 に お い て は,単 語 あ た り応 答 時 間 のp値0.3445に
対 して 文 字 あ た り応 答 時 間 は0.4402と な り,ど ち ら も 有 意 差 は 見 られ な か っ た.
4.1.2.2話 題 転 換
計24回 の 実 験 の うち 話 題 転 換 が 行 わ れ た の は6回 で あ り,そ の うち2回 は 文 章 が 意 味 を 持 た な い 発 話 に な っ て しま っ た.残 る4回 に 対 し て 文 字 当 た り応 答 時 間,及 び 単 語
あ た り応 答 時 間 を 計 算 した 結 果 を 図8に 示 す.
[s/字1 [s/語]
12 25
臣￡10
盤 躍 20
坤 盤
煙8
9
響 ・5
喫
6 9罰 農
肝
槍 10執4 龍
珊
52
0 0
1 2
34
1 2 3 4話題転換を行った応答 話題転換を行った応答
図8:(a)発 話 転 換 実 施 時 の 文 字 あ た り応 答 時 間(b)発 話 転 換 実 施 時 の 単 語 あ た り応 答 時 間
図 に 示 し た 横 線 は,不 自 然 と判 断 され た 発 話 の 文 字 当 た り応 答 時 間,及 び 単 語 あ た り 応 答 時 間 の 平 均 値 で あ る.4回 の 発 話 の うち こ の 値 以 下 の も の が1回 で あ っ た の に 対 し, 残 り3回 は 大 き く上 回 っ た.こ の 結 果 か ら,上 述 の 指 標 を 基 準 と した 場 合 に は こ れ ら は 話 題 転 換 が 不 自然 な 発 話 に 分 類 さ れ る.そ の 理 由 と し て 考 え られ る こ と と して,こ の3 つ の 話 題 転 換 は い ず れ も,対 話 内 容 が 固 有 名 詞 に つ い て 言 及 して い た 事 が あ げ られ る.
こ の 時 の 発 話 は 例 え ば,コ ミ ケ の 話 題 か ら 「 深 夜 い き な りで あ れ な ん で す が 、 コ ミ ケ で
い た だ い たM座 型 機 動 外 骨 格 が 大 変 ス バ ラ シ イ の で 周 囲 に 布 教 して お りま す 」 の よ う
に 一 般 的 で は な い 話 題 へ の 話 題 転 換 を 行 っ て し ま っ た た め,実 験 協 力 者 が 反 応 に 困 り,
応 答 ま で の 時 間 が か か っ て しま っ た こ と が 考 え られ る.こ の と き,実 験 協 力 者 の 応 答 は
3回 中2回 が 疑 問 文,残 り1回 は 続 き を 促 す よ うな 応 答 とな っ て い た.こ の ケ ー ス に お
い て は,そ の 後 の 対 話 も含 め ア ン ケ ー トで 不 自然 に 感 じ た 対 話 と 回 答 さ れ て い た が,一
方 で エ ー ジ ェ ン トが 話 題 を 理 解 で き て お りそ の 話 題 を 続 け る こ とが で き れ ば 不 自 然 な
対 話 で は な い と の 回 答 も あ っ た.現 状 で は,対 話 工 一 ジ ェ ン トが 話 題 を理 解 す る の は 困
難 で あ り,そ の 後 の 対 話 の 継 続 に 支 障 が あ る と考 え ら れ る た め,転 換 の 際 は 固 有 名 詞 を 避 け て 話 題 を 選 択 す る 事 が 好 ま しい と考 え る.し か し,対 話 工 一 ジ ェ ン トの 能 力 が 向 上 し,事 前 に 対 応 可 能 な 話 題 か を 判 断 す る こ と が 可 能 と な れ ば,よ り高 度 な 対 話 の 実 現 に 貢 献 す る こ と が 期 待 で き る.
逆 に,話 題 転 換 を 行 っ た 部 分 で は な か っ た が,ユ ー ザ 側 の 知 識 の 不 足 で 本 来 な ら ば 問
題 な い 発 話 で あ っ た は ず が 不 自然 な 発 話 と し て 回 答 され て しま っ た 例 も あ っ た.こ うい
っ た 事 例 が 発 生 す る原 因 と して は,エ ー ジ ェ ン トに 対 して 意 味 を 尋 ね た も の の 回 答 が な
か っ た 場 合 も考 え ら れ る が,相 手 が エ ー ジ ェ ン トで あ る た め 間 違 っ た 返 答 を 返 す か も し
れ な い と い う意 識 が あ っ た こ と に 起 因 す る 場 合 も あ る と 考 え る.
24回 の 実 験 に お け る 話 題 転 換 に 関 す る 内 訳 を 図10に 示 す.こ の う ち,「 破 綻 と判 断 さ れ な か っ た 」 と 「 話 題 が 見 つ か ら な か っ た 」 が,話 題 転 換 を 行 わ な か っ た 場 合 に 相 当 す る.前 者 は,5分 間 の 対 話 の 中 で,話 題 転 換 が 必 要 と一 度 も 判 断 され な か っ た こ と を 意 味 す る.話 題 転 換 の 必 要 性 が 検 出 され た も の の,適 切 な 話 題 を 見 つ け られ な か っ た 場 合 は10件 あ る が,こ の 原 因 と し て 考 え られ る の は,コ ン テ ク ス ト検 索 エ ン ジ ン の デ ー タ 不 足 が 挙 げ ら れ る .こ れ に 関 して は検 索 可 能 な ア イ テ ム を 追加 す る こ とで,改 善 し て い く こ と が 期 待 さ れ る.
適 切 な位 置 で 破 綻 と 判 断 され た(4)
適 切 で な い 位 置 で破 綻 と 判 断 され た(12)
破 綻 と}鵬1さ ね ,黛刀 ・つ だ(8)
話 題 か 児 つ 〃1ら
な か!ノ撤1) 話 題 転 換 を 行 っ た(4)
図10話 題転換 の内訳
ま た,「 破 綻 と 判 断 さ れ な か っ た 場 合 」 を 除 く16件 で は,シ ス テ ム に よ り破 綻 が 検 出 され た が,実 際 に 不 自然 な 発 話 と ア ン ケ ー トで 回 答 され た 場 所 で 適 切 に 破 綻 を 検 出 し て い た も の は4件 で あ っ た.こ の と き,話 題 転 換 を 行 っ た が 文 で な い 発 話 を 返 して し ま っ た2件 を確 認 した と こ ろ,例 え ば 眠 気 の 話 題 か ら 「 エ リカ,お は,眠 気,沢 尻 エ リカ,諸 悪 の 根 源,おfaa,土 曜 日 は,お は よ 一,ブ ー ツ,沢 尻 エ リカ の,年 代,国 内,今 日 も 一
日,marco,BBQ」 と い う単 語 を 羅 列 した ツ イ ー トが,も と も と の 話 題 で あ る 「 眠 気 」
と コ ン テ ク ス ト検 索 エ ン ジ ン の 検 索 結 果 か ら得 られ た ア イ テ ム で あ る 「 沢 尻 エ リカ 」の
両 方 を キ ー ワ ー ドと して 含 む ツ イ ー ト と判 断 され 応 答 文 が 生 成 され て い た.こ の 問 題 は,対 象 と な る ア イ テ ム が 「 」 や,な ど の 記 号 に 囲 ま れ て い る ツ イ ー トを 除 外 す る こ と で 改 善 が 可 能 と考 え る.
4.2評 価 実 験 4.2.1実 験 概 要
予 備 実 験 の 結 果 を 踏 ま え 再 度 実 験 を 行 っ た.実 験 の 手 順 は 基 本 的 に は 予 備 実 験 と 同 様
と した.変 更 点 と し て は,事 前 の 話 題 設 定 の 際 予 備 実 験 で は 時 期 を 指 定 し て い た が,100
以 上 の ア イ テ ム が 出 て く る場 合 が あ っ た た め,被 験 者 の 負 担 を 考 え ラ ン ダ ム で20の ア
イ テ ム が 表 示 され る よ うに した.ま た,予 備 実 験 の 際 話 題 転 換 を 行 え る ア イ テ ム が 予 定
して い た よ り も 少 な か っ た た め,事 前 に 条 件 に 合 致 す る ツ イ ー トが 存 在 す る ア イ テ ム の
み を 表 示 す る よ うに 変 更 した.ま た,話 題 転 換 の 際 の 指 標 と し て は3.2節 で 提 案 した 文
字 あ た り応 答 時 間,及 び 単 語 あ た り応 答 時 間 を 用 い た.ア ン ケ ー トの 内 容 は,予 備 実 験
時 の も の に加 え,特 に 対 話 の 継 続 が 難 し い と感 じ た 発 話 を 答 え て も ら っ た.実 験 は 工 学
系 学 部 生 ・院 生6人 に 協 力 し て も らい,1人 あ た り3回 で 計18回 の 実 験 を 行 っ た.
4.2.2実 験 結 果
4.2.2.1話 題 転 換 の タ イ ミ ン グ
全18回 の 実 験 の う ち適 切 な タ イ ミ ン グ で 話 題 転 換 を 行 う こ と が で き な か っ た の は 半 分 の9回,う ち3回 は 話 題 転 換 を 行 わ ず に 対 話 が 終 了 し た(図11).
タ イ ミ ン ゲ が 滴 切 て な い
(6)
ゲが 遥1切 《9)
