電子情報通信学会ワードテンプレート (タイトル)

DEIM Forum 2016 B5-4

Twitter におけるアニメのネタバレツイート判定手法の提案

田島 一樹

†

中村 聡史

‡

†‡明治大学大学総合数理学部 〒164-8525 東京都中野区中野 4-21-1

E-mail: †[email protected], ‡[email protected]

あらまし アニメなどテレビ番組を視聴しながら Twitter で感想などの情報発信することは一般的であり，リア ルタイムな感想共有は視聴体験を高めることにつながっている．一方で，こうしたネタバレ情報は，未視聴のユー ザにとって本来作品を通して体験するはずだった興奮や感動的な体験を無くしてしまう忌むべきものである．我々 はこれまでの研究で，放送時間差によってネタバレに遭遇してしまうユーザの規模を明らかにし，ネタバレデータ セットの構築およびアニメにおけるネタバレ分類を行った．本研究では複数のアニメコンテンツに対するネタバレ データセットを構築し，ネタバレ判定手法を提案するとともに，評価実験でネタバレの推定可能性を検証する．結 果として，アニメのネタバレ判定にはツイートに含まれるアニメの登場人物名を一般的な語に置換し，かつ係り受 け解析を用いて単語ベクトルを生成することが必須であることを明らかにした． キーワード ネタバレ防止，ストーリーコンテンツ，機械学習，Twitter

1.は じ め に

Twitterや Facebookに 代 表 さ れ る ソ ー シ ャ ル ネ ッ ト ワ ー ク サ ー ビ ス（ SNS）は ，友 人 や 知 人 な ど と の 交 流 や 情 報 収 集 の 場 と し て 必 要 不 可 欠 な 存 在 と な り つ つ あ る ． こ う し た SNSで は 互 い の 近 況 を 報 告 す る だ け で な く ， 思 っ た こ と や 感 じ た こ と を リ ア ル タ イ ム で 発 信 し て い き ， 他 者 と 共 有 す る と い う こ と が 日 常 的 に 行 わ れ て い る ． こ こ で ， ド ラ マ や ア ニ メ で 思 っ た こ と や 感 じ た こ と を Twitter で 他 者 と 共 有 す る た め 発 信 す る こ と も 多 く ， 番 組 の 放 送 に 応 じ て Twitter上 が 盛 り 上 が る こ と も 多 い ． こ う し た 番 組 に 連 動 し た ツ イ ー ト (140字 以 内 の Twitter で の 投 稿 ) は ， そ の 番 組 を 視 聴 し て い る 人 に と っ て は 楽 し い も の で あ る ． 一 方 ， そ の 番 組 を 視 聴 す る の を 楽 し み に し て い る が ， 何 ら か の 事 情 で リ ア ル タ イ ム に 視 聴 で き な い 人 に と っ て は ， そ う し た ツ イ ー ト は ネ タ バ レ に つ な が る た め 悩 ま し い も の で あ る ． こ こ で ネ タ バ レ と は ， 物 語 を 視 聴 す る こ と を 通 し て 本 来 得 ら れ た は ず の 興 奮 や 感 動 的 な 体 験 を 奪 い 去 っ て し ま う も の で あ る ． 株 式 会 社 社 会 情 報 サ ー ビ ス が 運 営 し て い る サ イ ト [1] で 行 わ れ た コ ン テ ン ツ に お け る ネ タ バ レ に 関 す る ア ン ケ ー ト の 結 果 ， 受 け た 人 の 内 の 約 6割 が 映 画 な ど の ネ タ バ レ に 対 し て 不 満 を も っ て い る も の と し て い る ． こ う し た 問 題 は SNSサ イ ト に ア ク セ ス す る こ と ， ア プ リ ケ ー シ ョ ン を 使 わ な い こ と で 回 避 す る こ と が で き る ． し か し ， SNSを 遮 断 す る こ と は 友 人 と の コ ミ ュ ニ ケ ー シ ョ ン を 遮 断 す る と と も に ， ニ ュ ー ス な ど の 情 報 へ の 接 触 機 会 を 減 ら し て し ま う た め ， そ の 対 策 方 法 と し て は 現 実 的 で は な い ． ま た ， ネ タ バ レ さ れ な い た め に は リ ア ル タ イ ム で 視 聴 し た ら 良 い と 考 え ら れ る が ， 仕 事 や 学 校 の 都 合 上 ， リ ア ル タ イ ム で 視 聴 で き な い ケ ー ス は 多 々 あ る ． さ ら に ， 地 域 に よ る 放 送 時 間 の 違 い も 問 題 の 一 つ で あ る ． SNSが 普 及 す る ま で で あ れ ば こ う し た 地 域 が 離 れ た 視 聴 者 同 士 は ， そ の 物 理 的 な 距 離 に よ り コ ミ ュ ニ ケ ー シ ョ ン を 取 る 機 会 は 限 ら れ て お り 問 題 と な り に く か っ た が ， SNS上 で こ う し た ユ ー ザ 同 士 が つ な が っ た に 問 題 と な っ て い る ． 我 々 は こ れ ま で の 研 究 で ド ラ マ や ア ニ メ の 放 送 時 間 が 地 域 ご と に 異 な る と い う 点 に 注 目 し ， 放 送 時 間 差 に よ っ て ネ タ バ レ に 遭 遇 し て し ま う 可 能 性 が あ る ユ ー ザ の 規 模 に つ い て 調 査 し ，視 聴 者 の 約 7割 が ネ タ バ レ に 遭 遇 し て し ま う 可 能 性 が あ る こ と を 明 ら か に し た ． ま た ， ス ト ー リ ー コ ン テ ン ツ に お い て 人 々 が 共 通 し て 致 命 的 な ネ タ バ レ と 考 え る 出 来 事 に つ い て 調 査 を 実 施 し ， ア ニ メ で は 正 体 ，生 死 ，人 物 特 徴 ，勝 敗 の 4カ テ ゴ リ に 関 す る 情 報 が 特 に 問 題 と な る ネ タ バ レ で あ る こ と ， そ し て SVMに よ る 分 類 を 行 っ た 結 果 ，勝 敗 に 関 す る ネ タ バ レ の 判 定 は し や す く ， 正 体 に 関 す る ネ タ バ レ の 判 定 は し に く い こ と を 明 ら か に し た ． し か し ， こ れ ま で の 研 究 で は ネ タ バ レ デ ー タ セ ッ ト を 構 築 す る 際 に 著 者 が デ ー タ に 対 し て ラ ベ リ ン グ を 行 っ て お り ， 再 現 性 の 点 で 問 題 が あ っ た ． ま た ， 我 々 は 放 送 中 の ア ニ メ 番 組 に 連 動 し た ツ イ ー ト に 含 ま れ る ネ タ バ レ で な く ， ユ ー ザ の 知 人 や 友 人 が 発 言 す る ジ ャ ン ル が 一 様 で な い ツ イ ー ト に 含 ま れ る ネ タ バ レ を 判 定 対 象 と し て い る も の で あ り ， そ れ を ど の 程 度 判 定 で き る の か 明 ら か に で き て い な か っ た ． そ こ で 本 研 究 で は ， 複 数 の ア ニ メ コ ン テ ン ツ に 対 す る ネ タ バ レ デ ー タ セ ッ ト を 構 築 し ， ツ イ ー ト に 対 す る 事 前 処 理 と 単 語 ベ ク ト ル 生 成 手 法 を 提 案 す る と と も に 評 価 実 験 に よ っ て ど の 事 前 処 理 と 単 語 ベ ク ト ル 生 成 手 法 の 組 み 合 わ せ が Twitter で の ネ タ バ レ 判 定 に 有 効 で あ る か を 明 ら か に す る ． 具 体 的 に は ， 1 つ の ア ニ メ 作 品 か ら 4 話 分 と バ ト ル 系 ， ミ ス テ リ ー 系 の 2 ジ ャ ン ル に 該 当 す る ア ニ メ 作 品 を そ れ ぞ れ 4 つ ず つ 選 定 し ， 各

ア ニ メ 番 組 に 連 動 し た ツ イ ー ト と 一 定 期 間 内 に 投 稿 さ れ た 全 て の ツ イ ー ト か ら 無 作 為 に 選 定 し た ツ イ ー ト で 同 一 作 品 デ ー タ セ ッ ト と ジ ャ ン ル 分 け デ ー タ セ ッ ト を 構 築 す る ． そ し て ， ツ イ ー ト に 対 し て 事 前 処 理 を 行 っ た 上 で 単 語 ベ ク ト ル を 作 成 し ，SVM を 用 い た デ ー タ セ ッ ト ご と の ネ タ バ レ ツ イ ー ト の 判 定 精 度 の 算 出 や 判 定 し に く い ネ タ バ レ ツ イ ー ト の 特 徴 を 分 析 す る こ と で ネ タ バ レ 推 定 可 能 性 を 検 証 す る ．

2.関 連 研 究

ネ タ バ レ 防 止 を 目 的 と し た 研 究 は こ れ ま で に も い く つ か な さ れ て き て い る ． 中 村 ら [3]は ，諸 事 情 に よ っ て リ ア ル タ イ ム で ス ポ ー ツ の 試 合 を 見 る こ と が で き な い ユ ー ザ が ウ ェ ブ ペ ー ジ を 閲 覧 し て い る 際 ， 試 合 の 内 容 に 関 す る ネ タ バ レ に 遭 遇 し て し ま う こ と を 問 題 と し ， そ う し た ユ ー ザ の た め に ウ ェ ブ ペ ー ジ に お け る テ キ ス ト 情 報 の 曖 昧 化 処 理 に よ っ て ネ タ バ レ を 防 止 す る 手 法 を 提 案 し て い る ． し か し ， そ の 手 法 で は 事 前 に 用 意 し た ネ タ バ レ 用 正 規 表 現 辞 書 と の マ ッ チ ン グ が 前 提 で あ り ， 辞 書 を メ ン テ ナ ン ス す る 手 間 が あ っ た ．そ こ で ，白 鳥 ら [4]は そ う い っ た サ ッ カ ー の ネ タ バ レ を 大 ま か に 直 接 的 ネ タ バ レ と 間 接 的 ネ タ バ レ に 分 類 し ， 正 規 表 現 の み で は 判 定 で き な い 間 接 的 に 試 合 結 果 が 分 か っ て し ま う ネ タ バ レ の 判 定 可 能 性 を 示 し た ． 本 研 究 は こ う し た ネ タ バ レ 判 定 の た め の 分 類 器 を 機 械 的 に 構 築 す る こ と を 目 的 と し て い る ． Golbeck ら [5] は ア メ リ カ の 時 差 で 地 域 ご と に 放 送 時 間 が 異 な る こ と に よ り Twitter で ネ タ バ レ さ れ て し ま う 事 例 を 紹 介 し て お り ， 世 界 的 に も ネ タ バ レ は 問 題 と な っ て い る こ と が 分 か る ． こ の 研 究 で は ド ラ マ や ス ポ ー ツ に 関 す る ワ ー ド が 登 録 さ れ て い る ブ ラ ッ ク リ ス ト を 生 成 す る こ と に よ っ て テ キ ス ト の ネ タ バ レ を 検 知 し ， そ の ツ イ ー ト を ブ ロ ッ ク す る た め の ミ ュ ー ト ボ タ ン を 実 装 し て い る ． Golbeckら は 全 て の ネ タ バ レ を 検 知 し ， 再 現 率 100%を 目 指 し て い る と い う 点 で 我 々 と 同 じ で あ る が ， 本 研 究 で は ス ト ー リ ー コ ン テ ン ツ に お け る ネ タ バ レ を 分 類 お よ び 判 定 す る と い う 点 で 異 な る ． Twitter ク ラ イ ア ン ト を 実 装 す る こ と に よ り ネ タ バ レ 防 止 を 行 う 手 法 と し て [3]や [5]が あ る ．こ う し た 研 究 で は ハ ッ シ ュ タ グ 付 き ツ イ ー ト か ら 時 間 的 に バ ー ス ト す る 単 語 を 抽 出 し ， そ の 単 語 を 含 む ツ イ ー ト を 非 表 示 に す る こ と で ネ タ バ レ を 防 止 し て い る ． し か し ， バ ー ス ト す る 単 語 が 必 ず ネ タ バ レ と い う わ け で は な い ． 本 研 究 で は 複 数 の ア ニ メ に 対 す る ネ タ バ レ デ ー タ セ ッ ト を 構 築 し ， ス ト ー リ ー コ ン テ ン ツ に お け る 本 質 的 な ネ タ バ レ の 防 止 を 目 指 し て い る と い う 点 で 異 な る ． 池 田 ら [6] は Amazon.comや 価 格 .comの よ う な オ ン ラ イ ン シ ョ ッ ピ ン グ サ イ ト に お い て ， ユ ー ザ が 商 品 購 入 の 意 思 決 定 す る 際 に 参 考 に す る レ ビ ュ ー 文 に 小 説 ， 映 画 ， ゲ ー ム な ど の ス ト ー リ ー コ ン テ ン ツ に 関 す る あ ら す じ が 含 ま れ る こ と を 問 題 に 挙 げ て お り ， 人 名 辞 書 と 意 見 辞 書 を 用 い て あ ら す じ を 表 す 文 と 意 見 文 を そ れ ぞ れ 判 定 し ， あ ら す じ 部 分 の み を 隠 し て 表 示 す る シ ス テ ム の 提 案 と 実 装 を 行 っ て い る ． 判 定 す る 文 章 が ス ト ー リ ー コ ン テ ン ツ に 関 す る も の と い う 点 で は 同 じ だ が ， オ ン ラ イ ン シ ョ ッ ピ ン グ サ イ ト と Twitterで は ， 感 嘆 文 や 登 場 人 物 の 発 言 の 有 無 な ど 投 稿 さ れ る 文 章 の 傾 向 が 大 き く 異 な る と 考 え ら れ る ． 前 田 ら [7]は ，ユ ー ザ が ス ト ー リ ー コ ン テ ン ツ の レ ビ ュ ー を 参 考 に す る 際 に ネ タ バ レ に 遭 遇 す る こ と を 問 題 と し ， ス ト ー リ ー コ ン テ ン ツ に 対 す る 短 文 形 式 の ネ タ バ レ デ ー タ セ ッ ト を 構 築 す る こ と で ネ タ バ レ に 関 す る 単 語 が ス ト ー リ ー コ ン テ ン ツ 内 に ど の よ う に 分 布 し て い る か を 調 査 し て お り ， コ ン テ ン ツ の 文 書 か ら ネ タ バ レ に 関 連 し た 単 語 を 判 断 す る 手 法 に つ い て 検 討 し て い る ． 我 々 は コ ン テ ン ツ の 文 書 そ の も の で は な く コ ン テ ン ツ に 対 す る ツ イ ー ト か ら ネ タ バ レ 分 類 器 を 構 築 し ， ネ タ バ レ 判 定 を 行 う と い う 点 で ア プ ロ ー チ が 異 な る ． 田 中 ら [8] は ニ コ ニ コ 動 画 に お い て ネ タ バ レ と な る コ メ ン ト が 動 画 視 聴 中 に 流 れ て き て し ま う こ と を 問 題 に 挙 げ て お り ， ル ー ル ベ ー ス 手 法 と 機 械 学 習 に よ り ネ タ バ レ コ メ ン ト を 検 知 す る 手 法 を 提 案 し て い る ． こ こ で は ネ タ バ レ と な る 重 要 な 単 語 を 捉 え る 際 に 単 語 バ ー ス ト を 利 用 し て い る ． 田 中 ら は 動 画 共 有 サ イ ト 上 の 蓄 積 さ れ た 動 画 コ ン テ ン ツ に 対 す る ネ タ バ レ を 防 ぐ こ と を 目 指 し て い る が ， 本 研 究 は リ ア ル タ イ ム の イ ベ ン ト で あ る ア ニ メ に 対 す る ネ タ バ レ を 判 定 す る も の で あ る ． Leavitt ら [9] は ス ト ー リ ー コ ン テ ン ツ の 閲 覧 中 に ネ タ バ レ を 知 っ て し ま う た め に 否 定 的 な 感 情 が 生 ま れ る と 考 え ， 作 品 を 知 る 前 か ら そ の 作 品 の 知 識 を 得 る こ と に よ っ て 途 中 で ネ タ バ レ を さ れ て も 楽 し み を 損 な わ ず に 作 品 を 楽 し め る か ど う か の 実 験 を 行 っ て い る が ， 本 研 究 で は 人 々 が 既 に ス ト ー リ ー に つ い て の 知 識 を 持 っ て い る こ と を 前 提 と し て い る も の で あ る ．

3.判 定 手 法

こ こ で は ， ア ニ メ の 放 送 に 連 動 し た 実 況 の た め の Twitter で の 投 稿（ 以 降 ，番 組 連 動 ツ イ ー ト ）と ユ ー ザ の 知 人 や 友 人 が 発 言 す る ジ ャ ン ル が 一 様 で な い ツ イ ー ト (以 降 ， 一 般 ツ イ ー ト )か ら SVM の た め の 形 態 素 解 析 と 係 り 受 け 解 析 に よ る 単 語 ベ ク ト ル 生 成 手 法 を 提 案 す る ． 3.1 単 語 ベ ク ト ル 生 成 手 法 ア ニ メ の ネ タ バ レ ツ イ ー ト に は 日 常 的 に 使 用 し な い 特 徴 的 な 語 が 含 ま れ る と 考 え ら れ る ． そ こ で ， 我 々 は ネ タ バ レ 特 有 語 を 学 習 す る こ と で ネ タ バ レ の ツ イ ー

ト と ネ タ バ レ で な い ツ イ ー ト を 区 別 す る 手 法 を 提 案 す る ．具 体 的 に は 形 態 素 解 析 エ ン ジ ン の Mecab を 使 用 す る こ と で ツ イ ー ト を 単 語 に 分 割 し ， 得 ら れ た 単 語 の 中 か ら ネ タ バ レ が 含 ま れ る 文 章 に 特 有 で あ る と 考 え ら れ る 名 詞 ， 動 詞 ， 形 容 詞 ， 連 体 詞 ， 副 詞 の 5 つ の 品 詞 を 利 用 す る ． ま た ， そ れ ぞ れ 得 ら れ た 単 語 に つ い て は 原 形 を 使 用 し て 学 習 す る ． こ の 手 法 に よ る 単 語 ベ ク ト ル 生 成 手 順 を 図 1 に 示 す ． 図 1 形 態 素 解 析 を 用 い た 単 語 ベ ク ト ル 生 成 手 順 形 態 素 解 析 で は 単 語 の 情 報 が 得 ら れ る が ， ネ タ バ レ ツ イ ー ト を 判 定 す る 上 で 重 要 で あ る と 考 え ら れ る 「 誰 が ど う し た の か 」 な ど の 文 節 同 士 の 修 飾 関 係 を 考 慮 す る こ と が で き な い ． そ こ で ， 比 較 の た め 係 り 受 け 解 析 を 使 用 し て 文 節 同 士 の 修 飾 関 係 を 考 慮 す る こ と を 可 能 に す る 手 法 を 提 案 す る ． 係 り 受 け 解 析 に は 日 本 語 の 係 り 受 け 解 析 器 の CaboCha を 使 用 す る ．こ の 手 法 で は ツ イ ー ト を 文 節 ご と に 分 割 し ， 次 に 文 節 の 係 り 受 け 先 の 情 報 を 取 得 す る こ と で 文 節 と 修 飾 関 係 に あ る 文 節 同 士 を 繋 げ た 文 章 で 単 語 ベ ク ト ル を 生 成 す る ． こ の 手 法 に よ る 単 語 ベ ク ト ル 生 成 手 順 を 図 2 に 示 す ． 図 2 係 り 受 け 解 析 を 用 い た 単 語 ベ ク ト ル 生 成 手 順 こ れ ら 方 法 で 単 語 ベ ク ト ル を 生 成 し た も の を ベ ー ス ラ イ ン 手 法 と す る ． 3.2 事 前 処 理 判 定 精 度 向 上 の た め ， ツ イ ー ト を 単 語 ま た は 文 節 に 分 割 し た 時 点 で 行 う 事 前 処 理 を 3 つ 提 案 す る ． Brody ら [10]は Twitter に 代 表 さ れ る SNS で 単 語 の 一 部 を 連 続 さ せ る な ど し て 変 化 さ せ る こ と に よ っ て 投 稿 者 の 強 い 感 情 を 表 す 語 を 検 出 す る と い う 手 法 を 提 案 し て い る ． そ こ で ， ア ニ メ 視 聴 者 が 衝 撃 的 な 展 開 に 感 情 を 左 右 さ れ て 用 い る と 考 え ら れ る「 wwwwww」「 勝 っ た あ あ あ あ あ あ 」 の よ う な 連 続 し た 記 号 と 単 語 の 末 尾 の 母 音 部 分 を 正 規 表 現 で「 w」や「 勝 っ た あ 」の 形 に 変 換 す る ． こ れ を 正 規 化 手 法 と す る ． こ れ に よ り ， 語 尾 の 伸 ば し た 数 ご と に 単 語 ベ ク ト ル が 区 別 さ れ て し ま う と い う 問 題 を 防 止 で き ， 判 定 精 度 を 向 上 さ せ る こ と が で き る と 期 待 さ れ る ． ま た ， ス ト ー リ ー コ ン テ ン ツ に お け る 主 人 公 や ラ イ バ ル ， 犯 人 や 被 害 者 な ど の 登 場 人 物 名 は ， 作 品 と 話 数 ご と に 大 き く 異 な る ． 過 去 の ア ニ メ 作 品 に お け る ネ タ バ レ か ら ， 新 し い ア ニ メ 作 品 の ネ タ バ レ を 推 定 す る に は ， こ の 人 物 名 を 一 般 化 す る こ と が 重 要 に な る ． そ こ で ， 物 語 の 進 行 を 左 右 す る よ う な 影 響 力 の あ る 人 物 名 を「 主 要 人 物 」，物 語 へ の 影 響 力 の 少 な い 人 物 名 を「 モ ブ 」 と 置 き 換 え を 行 う ． こ れ を 人 物 名 一 般 化 手 法 と す る ． こ の 手 法 に よ っ て ， 例 え ば 「 主 要 人 物 が 死 ん だ 」 も の と「 モ ブ が 死 ん だ 」も の と を 区 別 す る こ と が で き ， 判 定 精 度 の 向 上 が 期 待 さ れ る ．な お ，「 主 要 人 物 」と「 モ ブ 」 の 区 別 に は 番 組 情 報 が 掲 載 さ れ て い る サ イ ト [11] と Wikipedia を 利 用 し て 行 っ た ． 具 体 的 に は ， 番 組 情 報 が 掲 載 さ れ て い る サ イ ト に お い て 出 演 者 と し て 掲 載 さ れ て い る 人 物 名 を「 主 要 人 物 」と 定 義 し ，Wikipedia に 掲 載 さ れ て い る 全 て の 人 物 名 か ら 先 述 し た 「 主 要 人 物 」 と な る 人 物 名 以 外 を 「 モ ブ 」 と 設 定 し た ． 最 後 に ， 先 述 し た 正 規 化 手 法 と 人 物 名 一 般 化 手 法 の 2 つ を 同 時 に 行 う も の を ， 正 規 化 ・ 人 物 名 一 般 化 組 み 合 わ せ 手 法 と す る ．

4 ネ タ バ レ デ ー タ セ ッ ト 構 築

ツ イ ー ト デ ー タ を 収 集 ・ 整 形 し ， 複 数 の ア ニ メ 作 品 に 対 す る ネ タ バ レ デ ー タ セ ッ ト を 構 築 す る ． 4.1 ツ イ ー ト 収 集 こ こ で は ， 番 組 連 動 ツ イ ー ト と 一 般 ツ イ ー ト の 収 集 方 法 を 示 す ． 4.1.1 番 組 連 動 ツ イ ー ト の 収 集 番 組 連 動 ツ イ ー ト の 多 く は ア ニ メ 作 品 ご と に 特 有 な 語 を 含 む と 考 え ら れ る ． そ こ で ， 作 品 特 有 語 を 学 習 可 能 に す る た め に 1 種 類 の 作 品 か ら 4 話 分 を 選 定 す る ． ま た ， ア ニ メ 作 品 は ジ ャ ン ル に よ っ て ど の よ う な 出 来 事 が ネ タ バ レ に な る の か 異 な る と い う 問 題 が あ る た め ， 判 定 す る 作 品 の ジ ャ ン ル と 同 ジ ャ ン ル の 作 品 の 番 組 連

動 ツ イ ー ト で 学 習 す る 必 要 が あ る と 考 え ら れ る ． そ こ で ， バ ト ル 系 と ミ ス テ リ ー 系 に 該 当 す る ア ニ メ そ れ ぞ れ 4 作 品 か ら ， 1 作 品 に つ き 1 話 分 を 選 定 す る ． つ ま り ，9 作 品 か ら 12 話 分 の 番 組 連 動 ツ イ ー ト を 収 集 す る ． こ こ で ， ア ニ メ 視 聴 者 の す べ て の 番 組 連 動 ツ イ ー ト を 収 集 す る た め に は ， そ の 時 間 帯 の す べ て の ツ イ ー ト を 収 集 ， 選 別 す る 必 要 が あ る た め 精 度 問 題 が 生 じ る ． ま た ， フ ォ ロ ー さ れ て い る 人 の み に ツ イ ー ト を 公 開 さ れ て い る 場 合 に ， そ う し た ツ イ ー ト を 収 集 す る こ と は 出 来 な い ． そ こ で ， ア ニ メ な ど の 作 品 を 視 聴 し な が ら リ ア ル タ イ ム で 投 稿 す る 際 ， ハ ッ シ ュ タ グ と 呼 ば れ る 検 索 お よ び タ グ 付 け を 可 能 と す る キ ー ワ ー ド を ツ イ ー ト に 付 与 す る こ と が 多 い た め ， ア ニ メ 番 組 に 対 す る ハ ッ シ ュ タ グ 付 き の ツ イ ー ト が 番 組 連 動 ツ イ ー ト を 代 表 し て い る と 考 え ， 学 習 お よ び 分 類 に 使 用 す る ． な お ， Twitterで ア ニ メ 番 組 の 実 況 に 用 い ら れ る ハ ッ シ ュ タ グ (#シ ャ ー ロ ッ ト ，#tokyomxな ど )を 設 定 し ， Twitter Search APIを 利 用 し て 選 定 し た ア ニ メ の 番 組 連 動 ツ イ ー ト を 収 集 し た ． 4.1.2 一 般 ツ イ ー ト の 収 集 Twitter の StreamingAPI を 利 用 し ， 日 本 語 で 投 稿 さ れ た 全 ツ イ ー ト の 中 か ら 無 作 為 に 5000 件 収 集 し た ． 具 体 的 に は ， デ ー タ に ネ タ バ レ ツ イ ー ト が 極 力 含 ま れ な い よ う に 収 集 す る 時 間 帯 を 考 慮 し ， 東 京 の 地 域 で は ア ニ メ 番 組 が 放 送 さ れ て い な か っ た 2015 年 1 月 9 日 16 時 か ら 1 時 間 ツ イ ー ト を 収 集 し た ． 4.1.3 デ ー タ 整 形 収 集 し た 投 稿 の 中 に は 分 類 を 行 う デ ー タ と し て 不 適 切 な も の が 含 ま れ て お り ， 下 記 に 示 す パ タ ー ン マ ッ チ に よ る テ キ ス ト 処 理 を 行 っ た ． (1) ボ ッ ト (bot) と 呼 ば れ る 自 動 発 言 シ ス テ ム に よ る 番 組 に 連 動 し た 投 稿 の 多 く は ， 放 送 開 始 ・ 終 了 等 を 知 ら せ る 広 告 で あ り ， 番 組 の 内 容 に つ い て 言 及 す る も の で は な く 不 要 で あ る ． そ こ で ，「【 自 動 】」 ま た は 「【 定 期 】」 を 含 む ツ イ ー ト を ボ ッ ト の 発 言 と し て 除 去 し た ． (2) ス パ ム ツ イ ー ト は 番 組 に 無 関 係 の た め 不 要 で あ る ． そ こ で ， ス パ ム ツ イ ー ト に 付 与 さ れ が ち な 「 http」 を 含 む ツ イ ー ト を 除 去 し た ． (3) リ ツ イ ー ト (RT)と 呼 ば れ る 他 人 の 発 言 を 引 用 で き る 機 能 に よ る 投 稿 は テ キ ス ト デ ー タ が 重 複 す る た め 不 要 で あ る ． そ こ で ， 「 RT」 を 含 む 投 稿 を リ ツ イ ー ト と し て 除 去 し た ． (4) 番 組 連 動 ツ イ ー ト に 含 ま れ る ネ タ バ レ と は 無 関 係 の 文 字 列 で あ る ハ ッ シ ュ タ グ を「 #」か ら 改 行 ま で と し て 除 去 し た ． ま た ， ハ ッ シ ュ タ グ が 付 与 さ れ た 一 般 ツ イ ー ト は 何 か し ら の イ ベ ン ト に 連 動 し て 投 稿 さ れ た 可 能 性 が あ り ， そ の 中 に は ア ニ メ 番 組 に 関 す る ツ イ ー ト も 含 ま れ る た め ，「 #」を 含 む 一 般 ツ イ ー ト を 除 去 し た ． 4.2 番 組 連 動 ツ イ ー ト 評 価 シ ス テ ム デ ー タ セ ッ ト 構 築 の た め ， 収 集 し た ツ イ ー ト が ネ タ バ レ か ど う か 評 価 者 を 集 め て 分 類 を 行 っ て も ら っ た ． こ こ で は ， 選 定 し た ア ニ メ 番 組 に 連 動 し た ツ イ ー ト か ら そ れ ぞ れ 2000ま た は 3000 件 ず つ 無 作 為 に 抽 出 し た ツ イ ー ト を 対 象 と し ， 1話 に つ き 3人 の 評 価 者 に 分 類 を 行 っ て も ら っ た ． な お ， 分 類 作 業 を 行 っ て も ら う た め に ， 図 3に 示 す ウ ェ ブ シ ス テ ム を 開 発 し た ． こ の シ ス テ ム で は ． ユ ー ザ は 最 初 に ア カ ウ ン ト 名 を 入 力 し て ロ グ イ ン し ， ペ ー ジ 上 に 提 示 さ れ て い る ツ イ ー ト に 対 し て ネ タ バ レ と 感 じ る も の を 複 数 選 択 す る と い う も の で あ る ． ツ イ ー ト は 4.1.3項 と 同 じ テ キ ス ト 処 理 を 行 っ た も の で あ り ， 投 稿 さ れ た 時 間 順 で は な く ラ ン ダ ム に 提 示 さ れ る ． 図 3 開 発 し た ウ ェ ブ シ ス テ ム 評 価 者 に は 作 成 し た ウ ェ ブ サ イ ト に ア ク セ ス し ， 直 前 の 話 の 内 容 を 確 認 し て も ら っ た 後 に ツ イ ー ト の 分 類 を 行 っ て も ら っ た ． な お ， ツ イ ー ト に 対 す る 分 類 結 果 は 100 件 毎 に デ ー タ ベ ー ス に 記 録 さ れ る た め ， 途 中 で 中 断 し て 再 開 す る こ と も 可 能 と な っ て い る ． 評 価 者 は Twitter を 普 段 か ら 用 い て お り ， か つ 分 類 す る ア ニ メ 作 品 の 選 定 し た 話 数 ま で 視 聴 済 み の 20 代 の 大 学 生 の 男 性 16 名 と 女 性 3 名 で あ る ． 4.3

一 般 ツ イ ー ト と 番 組 連 動 ツ イ ー ト で 構 成 さ

れ た デ ー タ セ ッ ト

一 般 的 に ，Twitter に お い て ユ ー ザ の 友 人 や 知 人 の 投 稿 内 容 は 投 稿 ご と に 言 及 す る ジ ャ ン ル が 異 な る こ と が 多 く ， そ の 中 に ネ タ バ レ が 含 ま れ て し ま っ て い る と い う 状 況 を 想 定 し た デ ー タ セ ッ ト を 構 築 す る 必 要 が あ る ． そ こ で ， ネ タ バ レ 分 類 シ ス テ ム に お い て 評 価 者 3 人 の う ち 2 人 以 上 が ネ タ バ レ と 判 定 し た ツ イ ー ト を ネ タ バ レ ツ イ ー ト ，4.1.2 項 で 収 集 し た ツ イ ー ト を 非 ネ タ バ レ ツ イ ー ト と し て 使 用 し た ． ネ タ バ レ ツ イ ー ト と 非 ネ タ バ レ ツ イ ー ト の 学 習 量 は 偏 り を 無 く す た め に ア ン ダ ー サ ン プ リ ン グ を 行 っ た ． こ こ で は ， 話 数 ご と に ネ タ バ レ ツ イ ー ト と 同 数 の 非 ネ タ バ レ ツ イ ー ト を 無 作 為 に 選 定 し た ． こ こ で ， 選 定 し た 1 種 類 の 作 品 の み を 用 い て 構 築 し た デ ー タ セ ッ ト を 同 一 作 品 デ ー タ セ ッ ト と し ， こ の 内 容 を 表 1 に 示 す ． ネ タ バ レ ツ イ ー ト 率 は 分 類 し た 全 ツ イ ー ト 中 の ネ タ バ レ ツ イ ー ト の 割 合 で 表 さ れ る ． 表 1 同 一 作 品 デ ー タ セ ッ ト 作 品 名 ネ タ バ レ ツ イ ー ト 率 (%) Charlotte(シ ャ ー ロ ッ ト ) 第 4 話 Charlotte(シ ャ ー ロ ッ ト ) 第 7 話 Charlotte(シ ャ ー ロ ッ ト ) 第 9 話 Charlotte(シ ャ ー ロ ッ ト ) 第 13 話 7.7 3.0 17.3 12.0 バ ト ル 系 と ミ ス テ リ ー 系 に 該 当 す る ア ニ メ 作 品 を 用 い て 構 築 し た デ ー タ セ ッ ト を ジ ャ ン ル 分 け デ ー タ セ ッ ト と し ， こ の 内 容 を 表 2 に 示 す ． 表 2 ジ ャ ン ル 分 け デ ー タ セ ッ ト ジ ャ ン ル 作 品 名 ネ タ バ レ ツ イ ー ト 率 (%) ミ ス テ リ ー 系 六 花 の 勇 者 第 12 話 す べ て が F に な る 第 10 話 櫻 子 さ ん の 足 元 に は 死 体 が 埋 ま っ て い る 第 11 話 終 物 語 第 5 話 9.4 6.7 1.2 8.6 バ ト ル 系 Fate/stay night[Unlimited Blade Works] 第 24 話 遊 戯 王 ARC-V 第 82 話 ワ ン パ ン マ ン 第 11 話 黒 子 の バ ス ケ 第 75 話 12.7 16.0 4.7 11.3

5.評 価 実 験

こ こ で は 一 般 ツ イ ー ト に 含 ま れ る ネ タ バ レ ツ イ ー ト の 判 定 精 度 を 算 出 す る ． 5.1 評 価 尺 度 本 研 究 で は ク ラ ス は 2つ あ り ， こ の ク ラ ス は ネ タ バ レ と な る ク ラ ス（ 正 例 ）と 非 ネ タ バ レ（ 負 例 ）で あ る ． こ の 2 ク ラ ス に お け る 評 価 尺 度 と し て ， 適 合 率 （ Precision）と 再 現 率（ Recall）を 用 い る ．こ こ で ，ク ラ ス Ciに 対 し て ， 適 合 率 と 再 現 率 は 以 下 の よ う に 算 出 さ れ る ． Precision(𝐶𝑖) = 正 し く𝐶𝑖に 分 類 さ れ た ツ イ ー ト 数 𝐶𝑖に 分 類 さ れ た ツ イ ー ト 数 Recall(𝐶𝑖) = 正 し く𝐶𝑖に 分 類 さ れ た ツ イ ー ト 数 𝐶𝑖に 属 す る ツ イ ー ト 数 番 組 を 楽 し み に 待 っ て い る 視 聴 者 に と っ て ネ タ バ レ は 可 能 な 限 り 回 避 し た い も の で あ る の で ， 正 例 で あ る ネ タ バ レ ツ イ ー ト を 可 能 な 限 り 網 羅 す る こ と が 重 要 で あ る ． そ こ で 本 研 究 で は ， 番 組 が 放 送 さ れ る ま で の 期 間 中 の み ， あ る 程 度 ネ タ バ レ で な い ツ イ ー ト を 遮 断 し て も 仕 方 な い も の と し ， 正 例 （ ネ タ バ レ ） 分 類 に 対 す る 再 現 率 に 特 に 注 目 し て 評 価 を 行 う ． 同 一 作 品 デ ー タ セ ッ ト で は 過 去 の 話 数 分 の ツ イ ー ト を 学 習 デ ー タ と し て 利 用 し ， 新 し い 話 数 を テ ス ト デ ー タ と し て 適 合 率 と 再 現 率 を 算 出 す る ． ジ ャ ン ル 分 け デ ー タ セ ッ ト で は ジ ャ ン ル ご と に 選 定 し た 4話 の 内 3話 分 を 学 習 デ ー タ と し て 利 用 し ，残 り 1話 分 の 作 品 を テ ス ト デ ー タ と し て 適 合 率 と 再 現 率 を 算 出 す る ． こ れ を 作 品 全 て に 対 し て 算 出 し ， 適 合 率 と 再 現 率 の 平 均 を 計 算 す る ． な お ， 機 械 学 習 に お け る ネ タ バ レ 判 定 精 度 に つ い て は ，3章 で 提 案 し た ベ ー ス ラ イ ン 手 法 ，正 規 化 手 法 ， 人 物 名 一 般 化 手 法 ， 正 規 化 ・ 人 物 名 一 般 化 組 み 合 わ せ 手 法 で そ れ ぞ れ 算 出 す る ． 5.2 結 果 と 考 察 評 価 実 験 に よ る 判 定 精 度 を 図 4~11に 示 す ．な お ，図 4~7 の 横 軸 は 判 定 し た 話 数 を 表 し て お り ， 図 8~11 の 横 軸 は 解 析 方 法 を 表 し て い る ．図 4，6，8，10の 縦 軸 は 適 合 率 ， 図 5， 7， 9， 11の 縦 軸 は 再 現 率 を 表 し て い る ．

図 4 同 一 作 品 の 話 数 ご と の 適 合 率 （ 形 態 素 解 析 ） 図 5 同 一 作 品 の 話 数 ご と の 再 現 率 （ 形 態 素 解 析 ） 図 4， 5 よ り 形 態 素 解 析 を 用 い た と き の 同 一 作 品 の ネ タ バ レ 判 定 結 果 と し て ， 特 に 9， 13 話 の 適 合 率 が 高 く ， ネ タ バ レ の 誤 検 知 は 少 な い が ， 一 方 で 7 話 の 再 現 率 は 10%未 満 ， 9， 13 話 で も 再 現 率 60%未 満 で あ り ， あ ま り ネ タ バ レ を 網 羅 で き な か っ た こ と が 分 か る ． 手 法 ご と の 結 果 で は ， 人 物 名 一 般 化 手 法 で 再 現 率 が 全 て 改 善 さ れ て い る 一 方 で 正 規 化 手 法 で は 7， 13 話 の 判 定 精 度 が 下 が っ た ． 図 6 同 一 作 品 の 話 数 ご と の 適 合 率 （ 係 り 受 け 解 析 ） 図 7 同 一 作 品 の 話 数 ご と の 再 現 率 （ 係 り 受 け 解 析 ） 図 6， 7 よ り 係 り 受 け 解 析 を 用 い て ネ タ バ レ 判 定 を し た 結 果 ， 形 態 素 解 析 と 比 べ て 全 体 的 に 再 現 率 が か な り 高 く な る こ と が 分 か る ． 特 に 7 話 は 再 現 率 が ほ ぼ 100%で あ り ，ネ タ バ レ ツ イ ー ト を ほ と ん ど 網 羅 す る こ と が 可 能 で あ っ た ． し か し ， 先 の 話 数 に 進 む に つ れ て 少 し ず つ 再 現 率 が 下 が っ て い る ． 一 方 ，適 合 率 は 60% 未 満 で あ り 誤 検 知 は 増 え た ． ま た ， 手 法 ご と の 結 果 で は ベ ー ス ラ イ ン 手 法 に 比 べ て 他 の 手 法 で ほ と ん ど 判 定 精 度 が 改 善 し な か っ た ． 図 8 バ ト ル 系 に お け る 手 法 ご と の 適 合 率 図 9 バ ト ル 系 に お け る 手 法 ご と の 再 現 率 図 8，9 よ り ，係 り 受 け 解 析 を 用 い た と き に 形 態 素 解

析 と 比 較 す る と 再 現 率 が か な り 高 く ， 一 方 で 適 合 率 が 低 い こ と が 分 か る ． ま た 人 物 名 一 般 化 手 法 で は 形 態 素 解 析 と 係 り 受 け 解 析 の 両 方 で 判 定 精 度 の 改 善 が 見 ら れ ， 特 に 形 態 素 解 析 で は 適 合 率 約 10%，再 現 率 約 30%改 善 し た ． 一 方 ， 正 規 化 手 法 で は 改 善 し な か っ た ． 図 10 ミ ス テ リ ー 系 に お け る 手 法 ご と の 適 合 率 図 11 ミ ス テ リ ー 系 に お け る 手 法 ご と の 再 現 率 図 10，11 よ り ，全 体 的 に か な り 再 現 率 が 低 く ，ミ ス テ リ ー 系 の ネ タ バ レ は あ ま り 網 羅 で き な か っ た ． し か し ， 人 物 名 一 般 化 手 法 で は 特 に 形 態 素 解 析 で 適 合 率 が 約 20%，再 現 率 が 約 19%改 善 さ れ ，係 り 受 け 解 析 よ り も 判 定 精 度 が 向 上 し た ． こ こ で 全 体 的 な 結 果 と し て ， ま ず 形 態 素 解 析 と 係 り 受 け 解 析 を 用 い た 判 定 結 果 を 比 較 し た と こ ろ ， 基 本 的 に は 係 り 受 け 解 析 を 用 い る こ と で ネ タ バ レ 判 定 を し や す く な る こ と が 明 ら か に な っ た ． し か し ， ミ ス テ リ ー 系 に お い て は 形 態 素 解 析 を し た と き の 判 定 精 度 が 比 較 的 や や 高 か っ た ． こ れ は ミ ス テ リ ー 系 に お い て は 文 節 ご と の 関 係 性 よ り も 単 語 の 情 報 が 重 要 で あ っ た た め と 考 え ら れ る ． そ こ で ， ア ニ メ ジ ャ ン ル に よ っ て 用 い る 単 語 ベ ク ト ル 生 成 手 法 を 変 え る 必 要 が あ る と 考 え ら れ る ． 次 に ， デ ー タ セ ッ ト ご と の 結 果 を ま と め る と 同 一 作 品 デ ー タ セ ッ ト で は 作 品 に 特 有 な 語 を 学 習 で き ， か な り ネ タ バ レ を 判 定 し や す い こ と が 明 ら か に な っ た ． し か し ， ア ニ メ コ ン テ ン ツ で は 作 品 の 話 数 が 進 む と 展 開 が 異 な っ て く る た め ， 有 効 な 形 態 素 が 話 数 ご と に 異 な る ． 例 え ば ， コ ミ カ ル な 場 面 か ら シ リ ア ス な 場 面 に 変 化 す る な ど の 急 展 開 後 の ネ タ バ レ 判 定 が 困 難 で あ る と 考 え ら れ る ． そ こ で ，同 一 作 品 の 最 新 話 の ネ タ バ レ を 判 定 す る と き は 過 去 に 投 稿 さ れ た そ の 作 品 全 て の 番 組 連 動 ツ イ ー ト を 利 用 し て デ ー タ セ ッ ト 構 築 す る の で は な く ， 最 新 話 か ら 数 話 前 ま で の 番 組 連 動 ツ イ ー ト の み を 利 用 す る 必 要 が あ る と 考 え ら れ る ． ジ ャ ン ル 分 け デ ー タ セ ッ ト で は バ ト ル 系 の ネ タ バ レ 判 定 は し や す く ， ミ ス テ リ ー 系 の ネ タ バ レ 判 定 は 困 難 で あ る こ と が 明 ら か に な っ た ．そ の 理 由 と し て ，バ ト ル 系 で は「 勝 っ た 」， 「 負 け た 」 と い っ た 勝 敗 に 関 す る 語 や 「 死 ん だ 」，「 生 き て い た 」と い っ た 人 物 の 生 死 に 関 す る 語 が 多 用 さ れ ， そ れ ら が 判 定 に 有 効 な 形 態 素 と な り 学 習 が し や す か っ た と 考 え ら れ る ． 一 方 ， ミ ス テ リ ー 系 で は 作 品 ご と に 異 な る ト リ ッ ク に 関 す る 情 報 や 作 品 に 特 有 な 語 が 特 に 多 く 出 現 し ， 判 定 に 有 効 な 形 態 素 が 少 な か っ た た め 学 習 が し に く か っ た と 考 え ら れ る ． 最 後 に 手 法 ご と の 結 果 を ま と め る と ， 正 規 化 手 法 で は ほ ぼ 判 定 精 度 の 改 善 は 見 込 め な い が ， 人 物 名 一 般 化 手 法 で は 判 定 精 度 を 改 善 可 能 で あ る こ と が 明 ら か に な っ た ．ま た ，正 規 化 手 法 が 有 効 で な か っ た た め 正 規 化・ 人 物 名 一 般 化 手 法 も 人 物 名 一 般 化 手 法 と 比 べ て 有 効 で な か っ た ． 正 規 化 手 法 に つ い て は 正 例 ， 負 例 の ど ち ら に お い て も 感 情 を 表 現 す る 連 続 語 が ほ ぼ 等 し く 出 現 し た た め 判 定 精 度 が 向 上 せ ず ， 人 物 名 一 般 化 手 法 に つ い て は ネ タ バ レ ツ イ ー ト の み に 一 般 化 さ れ た 登 場 人 物 名 が 多 く 含 ま れ て い た た め 判 定 に 有 効 な 単 語 ベ ク ト ル を 生 成 で き ， 判 定 精 度 が 向 上 し た と 考 え ら れ る ． こ こ で ， 実 際 に 機 械 学 習 を 通 し て 出 力 さ れ た デ ー タ を 確 認 し た と こ ろ ， ネ タ バ レ と 判 定 出 来 な っ た ツ イ ー ト に は あ る 程 度 傾 向 が あ る こ と が 明 ら か に な っ た ． そ こ で ， 判 定 が 困 難 な ネ タ バ レ ツ イ ー ト の 特 徴 と 言 及 さ れ て い た 内 容 を デ ー タ セ ッ ト ご と に 示 す ．  同 一 作 品 デ ー タ セ ッ ト 1. 登 場 人 物 の 正 体 に 関 す る 情 報 ． 2. 登 場 人 物 の 見 た 目 や 内 面 と い っ た 特 徴 の 変 化 が 分 か る 情 報 ．  ジ ャ ン ル 分 け デ ー タ セ ッ ト  バ ト ル 系 1. 登 場 人 物 の 見 た 目 や 内 面 と い っ た 特 徴 の 変 化 が 分 か る 情 報 ． 2. ユ ー ザ の 感 情 表 現 が 含 ま れ て い る ．  ミ ス テ リ ー 系 1. 登 場 人 物 の 正 体 に 関 す る 情 報 ． 2. ト リ ッ ク に 関 す る 情 報 ．

 両 デ ー タ セ ッ ト 共 通 1. 作 品 に 特 有 な 語・専 門 用 語 が 含 ま れ て い る ． 2. 登 場 人 物 名 が あ だ 名 や 名 称 に 置 き 換 え ら れ た 単 語 が 含 ま れ て い る ． 3. 登 場 人 物 と「 !」な ど の 記 号・絵 文 字 の 組 み 合 わ せ の み で 記 述 さ れ て い る ． 以 上 の 特 徴 を 持 つ 投 稿 を 判 定 可 能 に す る こ と が Twitter で の ネ タ バ レ 防 止 の 課 題 で あ る と 考 え ら れ る ．

6.ま と め

本 研 究 で は 複 数 の ア ニ メ 作 品 の 番 組 に 連 動 し た ツ イ ー ト と 一 般 ツ イ ー ト を 収 集 し ， シ ス テ ム を 使 用 し て 人 手 で ツ イ ー ト が ネ タ バ レ か ど う か 分 類 す る こ と で 可 能 な 限 り 実 用 的 な ネ タ バ レ デ ー タ セ ッ ト を 構 築 し ， そ れ ぞ れ の 分 類 器 を 作 成 し て 評 価 実 験 を 行 っ た ． ネ タ バ レ ツ イ ー ト を SVM で 学 習 し た 結 果 ， Twitter に お け る ア ニ メ の ネ タ バ レ 判 定 に は 人 物 名 一 般 化 の 事 前 処 理 を 行 い ， か つ 係 り 受 け 解 析 に よ る 単 語 ベ ク ト ル 生 成 が 必 須 で あ る こ と が 明 ら か に な っ た ． デ ー タ セ ッ ト に 関 し て は ， 同 一 作 品 デ ー タ セ ッ ト で 作 品 特 有 語 を 学 習 で き る た め ネ タ バ レ 判 定 は し や す い が ， 急 展 開 後 の ネ タ バ レ 判 定 が し に く い 可 能 性 が あ り ， ジ ャ ン ル 分 け デ ー タ セ ッ ト で は バ ト ル 系 の ネ タ バ レ 判 定 は し や す く ， 一 方 で ミ ス テ リ ー 系 の ネ タ バ レ 判 定 は 困 難 で あ る こ と が 明 ら か に な っ た ． 今 後 の 展 開 と し て は 扱 う ス ト ー リ ー コ ン テ ン ツ の 量 を 増 や す こ と に よ っ て ネ タ バ レ デ ー タ セ ッ ト を 拡 張 す る こ と ， 作 品 ご と に 特 有 な 語 を パ タ ー ン マ ッ チ に よ り 判 定 す る こ と ， 人 物 名 一 般 化 手 法 に お い て 登 場 人 物 の 性 別 を 区 別 す る こ と に よ っ て ネ タ バ レ 判 定 精 度 の 向 上 を 目 指 す ． 謝 辞 本 研 究 の 一 部 は ，JST CREST，明 治 大 学 重 点 研 究 A， 重 点 研 究 B の 支 援 を 受 け た も の で あ る ．

参 考 文 献

[1] ア ン ケ ー ト 100 人 に 聞 き ま し た !, http://www.enquete.ne.jp/hundred/ [2] 田 島 一 樹 , 中 村 聡 史 :ス ト ー リ ー コ ン テ ン ツ に 対 す る ネ タ バ レ の 基 礎 調 査 と そ の 判 定 手 法 の 検 討 , 研 究 報 告 グ ル ー プ ウ ェ ア と ネ ッ ト ワ ー ク サ ー ビ ス （ GN） , 2015-GN-96, Vol.7, pp.1-6(2015). [3] 中 村 聡 史 , 小 松 孝 徳 : ス ポ ー ツ の 勝 敗 に ま つ わ る ネ タ バ レ 防 止 手 法 : 情 報 曖 昧 化 の 可 能 性 , 情 報 処 理 学 会 論 文 誌 54(4), pp. 1402-1412 (2013). [4] 白 鳥 裕 士 , 中 村 聡 史 : SNS 上 で の サ ッ カ ー の 試 合 に 対 す る 直 接 的・間 接 的 ネ タ バ レ の 分 析 , 研 究 報 告 グ ル ー プ ウ ェ ア と ネ ッ ト ワ ー ク サ ー ビ ス （ GN） , 2015-GN-96, vol 8, pp.1 -8 (2015-09-25).

[5] Jennifer Golbeck: The Twitter Mute Button: A Web Filtering Challenge， Proceedings of the 2012 ACM annual conference on Human Factors in Computing

Systems (CHI 2012), pp. 2755-2758 (2012).

[6] 中 村 聡 史 ， 川 連 一 将 : ス ポ ー ツ の ネ タ バ レ を 防 止 す る Twitter ク ラ イ ア ン ト の 開 発 と 諸 検 討 ,第 4 回 ARG Web イ ン テ リ ジ ェ ン ス と イ ン タ ラ ク シ ョ ン 研 究 会 (2014). [7] 池 田 郁 , 土 方 嘉 徳 , 西 田 正 吾 : レ ビ ュ ー 文 か ら の あ ら す じ 除 去 と 人 名 特 定 に 関 す る 基 礎 検 討 , 自 動 制 御 連 合 講 演 会 講 演 論 文 集 , 52(0)， pp.239-239 (2009). [8] 前 田 恭 佑 ，土 方 嘉 徳 ，中 村 聡 史 ，ス ト ー リ ー 文 書 内 の ネ タ バ レ の 記 述 に 関 す る 基 礎 的 調 査 ，第 6 回 ARG Web イ ン テ リ ジ ェ ン ス と イ ン タ ラ ク シ ョ ン 研 究 会 ， 2015

．

[9] 田 中 駿 , 廣 田 壮 一 郎 , 高 村 大 也 : コ メ ン ト 機 能 付 動 画 共 有 サ ー ビ ス に お け る ネ タ バ レ 検 知 , 第 29 回 人 工 知 能 学 会 全 国 大 会 2015 (2015)．

[10] Leavitt J. D. and Nicholas J. S. Christenfeld: Story Spoilers Don’t Spoil Stories, Psychological Science (August 2011).

[11] Brody,S. and Diakopoulos, N; Cooooooooooooooollllllllllllll!!!!!!!!!!!!!!: Using word lengthening to detect sentiment in microblogs, Proc.Conference on Empirical Methods in Natural Language Processing ， pp.562–570 (2011).

[12] Yahoo!テ レ ビ G ガ イ ド [テ レ ビ 番 組 表 ], http://tv.yahoo.co.jp