DEIM Forum 2016 C4-5
印象に関する検索意図を考慮したサムネイル動画自動生成手法の提案
前島 紘希
†中村 聡史
‡土屋 駿貴
†大野 直紀
††‡ 明治大学総合数理学部 〒164-8525 東京都中野区中野 4-21-1
E-mail: †{ev30658 , ev30616 , ev30508}@meiji.ac.jp ‡[email protected]
あらまし 動画検索においては様々な方法が考えられるが,その一つが印象に基づく検索である.ここで,動画 検索結果のスニペットとして提示されるのはサムネイル画像とタイトル,簡単な説明文程度であり,その動画が自 身の意図に沿っているかどうかを判断するには不十分である.検索ユーザを支援するためサムネイル動画や要約動 画を生成する試みはあるが,これまでに実現されている手法は検索意図に応じたものではない.そこで本稿では, 音楽動画検索クエリ中の印象語を検索ユーザの意図として考え,印象語に応じたサムネイル動画を,ソーシャルコ メントを用いて自動生成する手法を提案する.また,自動生成されたサムネイル動画を用いた評価実験によって, 印象によってサムネイル動画を生成するのに適している手法は異なっていることを明らかにした. キーワード サムネイル, 動画, ソーシャルコメント
1. は じ め に
YouTube や ニ コ ニ コ 動 画 な ど 動 画 共 有 サ イ ト が 人 気 を 博 す よ う に な り , 一 般 ユ ー ザ に よ っ て 創 り 出 さ れ る 動 画 の 数 が 飛 躍 的 に 増 加 し て い る . ユ ー ザ が こ う し た 動 画 共 有 サ イ ト 上 で 視 聴 す る 動 画 を 探 す 場 合 , 動 画 ラ ン キ ン グ か ら 目 的 の も の を 探 し た り , 目 的 の 動 画 に 該 当 し そ う な キ ー ワ ー ド を 入 力 す る こ と で 検 索 し た り す る こ と が 一 般 的 で あ る . こ の 動 画 共 有 サ イ ト 上 で の 動 画 の 検 索 で は ,「 初 音 ミ ク 」や「 VOCALOID」,「 JAZZ」な ど の 固 有 名 詞 を 用 い る だ け で な く ,「 か わ い い 」「 壮 大 な 」「 泣 け る 」な ど の 印 象 に 基 づ く 検 索 が 行 わ れ る こ と も 少 な く な い . 実 際 に , ニ コ ニ コ 動 画 な ど で は 「 泣 け る 動 画 」 や 「 涙 腺 崩 壊 」 の よ う に 動 画 に 印 象 タ グ を つ け る 試 み が 多 々 行 わ れ て お り ,機 能 し て い る .し か し ,山 本 の 調 査 [10]に あ る よ う に , そ の タ グ は 十 分 に 付 与 さ れ て い る わ け で は な い . ま た , 印 象 語 を 付 与 し た 検 索 を 行 っ た 場 合 に 出 て く る 検 索 結 果 の 数 は 多 く ( 例 え ば 2016 年 2 月 時 点 で ,ニ コ ニ コ 動 画 で「 初 音 ミ ク き れ い 」で 検 索 す る と お よ そ 1000 件 の 動 画 が 検 索 の 候 補 と し て で て く る ), ど れ が 求 め て い る 動 画 な の か を 選 別 す る こ と は 容 易 で は な い . 特 に 動 画 の 検 索 に お い て は , ユ ー ザ は 視 聴 対 象 と す る 動 画 を タ イ ト ル や 動 画 の 説 明 文 な ど の テ キ ス ト 情 報 や サ ム ネ イ ル 画 像 を 見 て 選 ぶ こ と が 一 般 的 で あ り , テ キ ス ト 情 報 や 画 像 と い っ た 動 き の な い 情 報 か ら そ の 動 画 が ど の よ う な も の で あ る か を 判 断 す る こ と は 困 難 で あ る . そ う し た 問 題 を 解 決 す る た め , 中 村 ら は 音 楽 動 画 の サ ビ の 部 分 と , ニ コ ニ コ 動 画 に お い て 動 画 に つ け ら れ た コ メ ン ト の 量 や コ メ ン ト に 込 め ら れ た 感 情 に 注 目 し て サ ム ネ イ ル 動 画 を 抽 出 す る と い っ た 手 法 を 提 案 し て き た [4].し か し ,こ の 手 法 で は コ メ ン ト に 含 ま れ て い る 感 情 の 種 類 を ひ と く く り に し て し ま っ て い る . そ の た め , 特 定 の 印 象 語 を 用 い た 検 索 の 際 に 利 用 す る こ と が で き な い と い っ た 問 題 が あ っ た . そ こ で 本 稿 で は , ユ ー ザ の 検 索 ク エ リ に 印 象 語 が 含 ま れ る 場 合 ,そ の 印 象 語 を ユ ー ザ の 意 図 で あ る と 考 え , 印 象 語 に 応 じ た サ ム ネ イ ル 動 画 を 生 成 し て ユ ー ザ に 提 示 す る 手 法 を 提 案 す る . こ こ で は , 動 画 の ど の シ ー ン が そ の 印 象 語 に 適 し て い る か ど う か を , 動 画 に 対 し て 投 稿 さ れ て い る ソ ー シ ャ ル コ メ ン ト か ら 判 断 す る . そ し て 動 画 の 各 シ ー ン に お け る 印 象 を 推 定 し , そ の 印 象 度 合 い に 応 じ て シ ー ン の 切 り 出 し を 行 う . 我 々 の 手 法 に よ り ユ ー ザ は 検 索 結 果 が 自 分 の 求 め て い た 動 画 か , そ れ と も 自 分 が 探 し て い た も の と 違 う も の な の か と い う 判 断 が し や す く な り , 動 画 を 最 初 か ら 最 後 ま で 視 聴 す る か 否 か を 判 断 す る 指 標 に な る の で は な い か と 期 待 さ れ る .2. 関 連 研 究
ダ イ ジ ェ ス ト 動 画 の 生 成 に 着 目 し た 研 究 は 多 数 行 わ れ て い る .石 黒 ら の 研 究 [1]で は ,ド ラ マ や ア ニ メ の 次 回 予 告 の セ リ フ を 利 用 し た ダ イ ジ ェ ス ト 動 画 生 成 を 行 っ て い る . し か し , こ の 手 法 は , 次 回 予 告 が 必 須 と な っ て い る た め , 動 画 共 有 サ イ ト 上 の 動 画 へ 利 用 す る こ と は で き な い . 小 川 ら の 研 究 [2]で は ,ニ コ ニ コ 動 画 に お け る ソ ー シ ャ ル コ メ ン ト が 多 い 箇 所 を 判 定 し , そ の 箇 所 の み を 再 生 す る と い っ た ダ イ ジ ェ ス ト の 疑 似 生 成 を 行 っ て い る . し か し , 単 純 に コ メ ン ト が 多 い か ら と い っ て そ の 部 分 が 重 要 な シ ー ン で あ る と は 限 ら ず , ま た ユ ー ザ の 検 索 意 図 に 応 じ た ダ イ ジ ェ ス ト の 生 成 は で き な い . な お , ソ ー シ ャ ル コ メ ン ト が 少 な い 動 画 の 際 に ダ イ ジ ェ ス ト 再 生 が さ れ な い こ と が 問 題 点 と し て 挙 げ ら れ て い る が , こ れ に つ い て は 我 々 の 研 究 も 同 様 の 問 題 を 抱 え て い る と 言 え る .磯 貝 ら の 研 究 [3]で は ,笑 い の 意 味 を 含 ん だ コ メ ン ト で あ る 「 w 」 を 利 用 し , お も し ろ い 動 画 を 探 し て い る 人 向 け の ダ イ ジ ェ ス ト 動 画 の 作 成 ア ル ゴ リ ズ ム の 手 法 を 提 案 し て い る .し か し ,こ の 研 究 で は「 お も し ろ い 」 と い う 印 象 に し か 焦 点 を 当 て て お ら ず , 多 種 多 様 な 印 象 語 に 対 応 で き て い な い .ま た ,「 w」が 使 わ れ て い る と し て も 必 ず し も 面 白 い と は 限 ら な い . 中 村 ら の 研 究 [4]で は ,音 楽 動 画 の サ ビ 検 出 技 術 ,感 情 コ メ ン ト の 数 を 利 用 し た 視 聴 者 の 盛 り 上 が り 検 出 技 術 ま た は そ の 両 方 を 用 い て 15 秒 の サ ム ネ イ ル 動 画 の 生 成 を 行 っ て い る . し か し , こ の 提 案 手 法 で は 感 情 コ メ ン ト の 種 類 に は 着 目 し て お ら ず , 動 画 検 索 の 際 に は 視 聴 者 の 検 索 意 図 を 考 慮 す る こ と が 出 来 な い . ウ ェ ブ 上 の 動 画 を 対 象 と し て い る わ け で は な い が , Miyamori ら の 研 究 [11]で は , テ レ ビ 番 組 を 見 な が ら チ ャ ッ ト を し て い る 人 の 情 報 を 利 用 し , テ レ ビ 番 組 の シ ー ン の イ ン デ ッ ク ス 化 お よ び ビ ュ ー を 生 成 す る 手 法 を 提 案 し て い る . こ の 研 究 は チ ャ ッ ト と い う テ キ ス ト 情 報 を 扱 っ て お り , 我 々 の ソ ー シ ャ ル コ メ ン ト を 用 い て い る 点 と 類 似 し て い る が , シ ー ン 検 索 か サ ム ネ イ ル 動 画 の 生 成 か と い う 用 途 が 大 き く 異 な っ て い る . 高 見 ら の 研 究 [5]で は ,ウ ェ ブ 検 索 の 検 索 意 図 に 応 じ て 検 索 結 果 の ス ニ ペ ッ ト を 再 構 築 す る 手 法 を 提 案 し て い る . こ の 研 究 は 我 々 の ク エ リ に 応 じ て 動 画 サ ム ネ イ ル を 生 成 す る と い う 点 と 類 似 し て い る が サ ム ネ イ ル 動 画 に 着 目 し た 研 究 で な い う え , 対 象 と す る メ デ ィ ア が 異 な る た め ア プ ロ ー チ も 大 き く 異 な っ て い る . ソ ー シ ャ ル コ メ ン ト と 印 象 の 関 係 性 を 明 ら か に す る 研 究 も い く つ か な さ れ て い る .土 屋 ら の 研 究 [6]で は , 下 記 で 説 明 す る 印 象 評 価 デ ー タ セ ッ ト を 用 い て ソ ー シ ャ ル コ メ ン ト か ら 音 楽 動 画 の メ デ ィ ア タ イ プ ( 映 像 , 音 楽 , 映 像 と 音 楽 ) に 対 す る 印 象 を 推 定 す る 実 験 を 行 っ て い る . 本 稿 で は , 動 画 に 対 す る 印 象 に よ る ソ ー シ ャ ル コ メ ン ト 内 に 出 現 す る 単 語 の 違 い を 調 べ , そ れ ら を 利 用 し 印 象 ご と の サ ム ネ イ ル 動 画 の 自 動 生 成 手 法 に つ い て 検 討 し て い く も の で あ る .
3. 印 象 評 価 デ ー タ セ ッ ト に 基 づ く 分 析
3.1. シ ー ン 毎 の 印 象 推 定 の 方 針 本 稿 で 目 的 と し て い る 動 画 の 印 象 に 基 づ く サ ム ネ イ ル 動 画 自 動 生 成 を 実 現 す る た め に は , 動 画 の シ ー ン 毎 の 印 象 を 推 定 す る 必 要 が あ る . 動 画 の シ ー ン 毎 の 印 象 推 定 に お い て は , 音 響 的 な 特 徴 量 を 使 う こ と や , 映 像 の 視 覚 的 な 特 徴 量 を 使 う こ と も 考 え ら れ る が , 本 稿 で は ユ ー ザ の 検 索 意 図 に 沿 っ た サ ム ネ イ ル 動 画 自 動 生 成 研 究 の 第 一 段 階 と し て , 動 画 の 再 生 時 間 に 対 す る ソ ー シ ャ ル コ メ ン ト を 用 い て , 動 画 の シ ー ン 毎 の 印 象 推 定 を 行 う . 動 画 の シ ー ン 毎 の 印 象 推 定 を 行 う に は , そ の 動 画 内 で 視 聴 者 の 受 け る 印 象 が ど の よ う に 変 化 し て い っ た の か と い う 情 報 が 必 要 と な る . こ こ で ソ ー シ ャ ル コ メ ン ト が 存 在 す る 動 画 に 対 す る 印 象 評 価 デ ー タ セ ッ ト と し て は , 我 々 が こ れ ま で に 構 築 し た 動 画 全 体 に 対 す る 印 象 評 価 デ ー タ セ ッ ト [9]と ,動 画 の サ ビ 部 分( 30 秒 )の 音 楽 の み , 映 像 の み , 音 楽 と 映 像 の 組 み 合 わ せ に 対 す る 印 象 評 価 デ ー タ セ ッ ト [7]が 存 在 す る .シ ー ン 毎 の 印 象 推 定 に お い て は , 両 デ ー タ セ ッ ト と も に 最 適 と は 言 い が た い が , 動 画 の 30 秒 に 対 す る 印 象 推 定 が 可 能 に な れ ば , シ ー ン 毎 の 印 象 推 定 も あ る 程 度 可 能 に な る と 考 え ら れ る . そ こ で , 本 稿 で は ま ず 我 々 が こ れ ま で 構 築 し た 30 秒 の 動 画 に 対 す る [7]に お い て 構 築 し た 印 象 評 価 デ ー タ セ ッ ト を 利 用 し , そ の 30 秒 分 の 印 象 推 定 の 可 能 性 を 検 討 す る . な お , 本 来 は 考 え う る す べ て の 印 象 に 対 応 す る よ う な 分 析 を 行 う 必 要 が あ る が , 本 稿 で は 研 究 の 第 一 段 階 と い う こ と で , 後 述 す る 印 象 評 価 デ ー タ セ ッ ト で 用 い ら れ て い る 8 つ の 印 象 軸 に つ い て の み 取 り 組 む . 3.2. 印 象 評 価 デ ー タ セ ッ ト 本 稿 で 用 い る 印 象 評 価 デ ー タ セ ッ ト は , 音 楽 動 画 の サ ビ 部 分 (RefraiD[8]に よ っ て 推 定 さ れ た サ ビ 開 始 の 5 秒 前 か ら 30 秒 間 )の み を 対 象 と し て , 8 軸 の 印 象 評 価 を 3 人 以 上 が 行 っ た も の で あ る . デ ー タ セ ッ ト で 用 い ら れ て い る 8 つ の 印 象 軸 を 表 1 に 記 す . 表 中 の 「 印 象 ク ラ ス 名 」は ,[7]お よ び [9]に お い て 便 宜 上 付 与 さ れ て い る 印 象 を 表 す ラ ベ ル 名 で あ る . 表 1 8 つ の 印 象 軸 C1(堂 々 ) 堂 々 と し た , ど っ し り と し た , 心 踊 る , 賑 や か な C2(元 気 が 出 る ) 元 気 が 出 る ,陽 気 な ,心 地 よ い , 楽 し い 気 持 ち に さ せ る C3(切 な い ) 切 な い , 悲 痛 な , ほ ろ 苦 い , 気 が 滅 入 る , 哀 愁 の C4(激 し い ) ア グ レ ッ シ ブ な , 激 し い , 興 奮 さ せ る , 感 情 的 な , 感 情 あ ら わ な C5(滑 稽 ) 滑 稽 な , ユ ー モ ラ ス な , お も し ろ げ な , 奇 抜 な , い た ず ら っ ぽ い C6(か わ い い ) 可 愛 ら し い , 愛 く る し げ , 愛 お し い , か わ い い Valence 明 る い 気 持 ち に な る , 楽 し い , 暗 い 気 持 ち に な る , 悲 し い Arousal 激 し い , 積 極 的 な , 強 気 な , 穏 や か , 消 極 的 な , 弱 気 な 評 価 対 象 と な っ て い る 音 楽 動 画 は , 動 画 共 有 サ イ ト で あ る ニ コ ニ コ 動 画 上 に 投 稿 さ れ た 音 楽 動 画 の う ち ,2012 年 8 月 時 点 で「 VOCALOID」と い う タ グ が 付 与 さ れ て い た , 再 生 数 が 多 い 上 位 500 個 を 抽 出 し た も の と な っ て い る . 本 稿 で は ,こ の 印 象 評 価 値 の 3 人 分 の 平 均 を 計 算 し , そ れ ぞ れ の 印 象 軸 に 対 す る 評 価 値 と す る . な お , 印 象 評 価 デ ー タ セ ッ ト で は , C1 か ら C6 に つ い て は 1( 全 く そ う 思 わ な い )~ 5( と て も そ う 思 う ),Valence に 対 し て は -2( 暗 い 気 持 ち に な る , 悲 し い ) ~ +2( 明 る い 気 持 ち に な る , 楽 し い ), Arousal に 対 し て は -2( 穏 や か , 消 極 的 な , 弱 気 な ) ~ +2( 激 し い , 積 極 的 な , 強 気 な )の 各 5 段 階 評 価 を さ れ て い た .そ こ で ,C1 か ら C6 に 対 す る 評 価 に つ い て は ,Valence-Arousal と 比 較 し や す く す る た め ,1~ 5 の 評 価 値 を 単 純 に -3 す る こ と に よ っ て -2~ +2 に 変 換 し た . 3.3. 分 析 方 法 各 印 象 で ど の よ う な コ メ ン ト が 付 与 さ れ て い る か を 明 ら か に す る た め に ,[7]に お い て 構 築 し た 印 象 評 価 デ ー タ セ ッ ト に 該 当 す る 500 個 の 音 楽 動 画 の サ ビ 部 分 ( 30 秒 間 ) に 対 し て 付 与 さ れ た コ メ ン ト を 収 集 し た . こ こ で 収 集 さ れ た コ メ ン ト の 総 数 は 4,780,872 件 で あ っ た . ま た , 明 確 な 印 象 の 差 に よ る 分 析 を 行 う た め , 8 つ の 印 象 軸 に 対 し て そ れ ぞ れ 評 価 値 が 1 以 上 の 動 画 集 合 と -1 以 下 の 動 画 集 合 を 作 成 し た( そ れ ぞ れ Positive 集 合 , Negative 集 合 と す る ). 例 と し て C1 と い う 印 象 軸 に つ い て 考 え る と ,C1 の 評 価 値 が 1 以 上 の 動 画 集 合 と 評 価 値 が -1 以 下 の 動 画 集 合 を 作 成 す る .こ の 操 作 を 8 つ の 印 象 軸 に 対 し て 行 う . そ の 後 , Positive 集 合 と Negative 集 合 の そ れ ぞ れ に つ い て す べ て の 単 語 の DF 値( こ こ で DF 値 と は ,動 画 を 1 つ の ド キ ュ メ ン ト と し て 捉 え , そ の 動 画 に 該 当 す る 単 語 が コ メ ン ト の 一 部 と し て 投 稿 さ れ て い る か で 算 出 ) を 計 算 す る . な お , 単 語 に つ い て は 形 態 素 解 析 を 行 う た め ,Mecab を 用 い た .最 後 に Positive 集 合 と Negative 集 合 の DF 値 の 差 を と り , そ の 差 の 大 き さ に よ っ て ど の よ う な 単 語 が 出 現 し や す い か の 分 析 を 行 っ た . そ の 際 ,DF 値 の 差 を「 0.2 以 上 」と「 0.1 以 上 0.2 未 満 」の 2 種 類 に 分 け て 出 現 す る 単 語 の 種 類 の 確 認 を 行 っ た . 3.4. 分 析 結 果 分 析 結 果 は 表 2,表 3 の 通 り で あ る .表 2 は ,Positive 集 合 と Negative 集 合 に お け る DF 値 の 差 が 「 0.2 以 上 」 の も の を ピ ッ ク ア ッ プ し た も の , 表 3 は DF 値 の 差 が 「 0.1 以 上 0.2 未 満 」の も の を ピ ッ ク ア ッ プ し た も の で あ る . 表 2 の 結 果 よ り , C1, C2, C6, Arousal の 4 軸 で は 「 か わ い い 」 と い う 単 語 が , C3, C4, Valence の 3 軸 で は「 か っ こ い い 」と い う 単 語 が ,C5 で は「 www」と い う 単 語 が 多 く 表 れ て い る こ と が 分 か る . 表 2 DF 値 の 差 が 「 0.2 以 上 」 の 8 つ の 印 象 軸 の 特 徴 的 な 単 語 C1( 堂 々 ) か わ い い , www C2( 元 気 が 出 る ) か わ い い , www C3( 切 な い ) か っ こ い い , 綺 麗 C4( 激 し い ) か っ こ い い , 声 C5( 滑 稽 ) www, 中 毒 C6( か わ い い ) か わ い い , 萌 え Valence か っ こ い い , サ ビ Arousal か わ い い C6( か わ い い )に 「 か わ い い 」 と い う 単 語 が 頻 出 し て い る の は 問 題 な い が ,C1( 堂 々 ),C2( 元 気 が 出 る ), Arousal( 積 極 的 )な ど に お い て も「 か わ い い 」と い う 単 語 が 出 て き て し ま っ て い る .ま た ,「 か わ い い 」と い う 単 語 は , C6 の 評 価 値 が -1 以 下 の も の に も そ れ な り の 頻 度 で 登 場 し て い た . そ こ で 実 際 に , 動 画 に 投 稿 さ れ て い る コ メ ン ト を 調 査 し て み た と こ ろ , 動 画 の お 約 束 と し て の「 か わ い い 」,単 純 に 初 音 ミ ク を 利 用 し て い る か ら「 か わ い い 」な ど の よ う に ,「 か わ い い 」と い う 言 葉 が 音 楽 動 画 自 体 の 印 象 と は 別 の も の と し て 利 用 さ れ て い た た め 今 回 の よ う な 結 果 に な っ た と 考 え ら れ る . つ ま り , 単 純 に 「 か わ い い 」 と い う 言 葉 を 利 用 す る だ け で は , 本 来 の 「 か わ い い 」 シ ー ン を 抽 出 す る こ と は 困 難 で あ る と 考 え ら れ る . 一 方 , C3, C4, Valence の 3 軸 に お い て 「 か っ こ い い 」と い う 単 語 が 頻 出 し て い る .C4( 激 し い )に お い て は 「 か っ こ い い 」 と い う 単 語 が 頻 出 語 と し て 出 て く る の は 問 題 な い が ,C3( 切 な い )や Valence( 楽 し い ) な ど に お い て も 「 か っ こ い い 」 と い う 単 語 が 出 て き て し ま っ て い る .そ こ で ,「 か っ こ い い 」と い う コ メ ン ト が ど の よ う に 利 用 さ れ て い る か を 調 査 し て み た と こ ろ , 鏡 音 レ ン な ど の キ ャ ラ ク タ ー の 見 た 目 に 対 し て の 「 か っ こ い い 」,楽 曲 の ス ト ー リ ー 中 の キ ャ ラ ク タ ー の 性 格 に 対 し て の「 か っ こ い い 」な ど の よ う に ,「 か っ こ い い 」 と い う 言 葉 が 音 楽 動 画 自 体 の 印 象 と は 別 の も の と し て 利 用 さ れ て い た .つ ま り ,「 か わ い い 」同 様 ,単 純 に「 か っ こ い い 」と い う 言 葉 を 利 用 す る だ け で は ,本 来 の「 か っ こ い い 」 シ ー ン を 抽 出 す る こ と は 困 難 で あ る と 考 え ら れ る . こ こ で ,C3 に 現 れ た「 か っ こ い い 」と い う 単 語 の DF 値 の 差 が C4 や Valence に 現 れ た「 か っ こ い い 」と い う 単 語 の DF 値 の 差 よ り も 値 が 低 く な っ て い た .こ れ は , C3 の「 か っ こ い い 」は C4 や Valence の「 か っ こ い い 」 よ り も 印 象 と し て 弱 い も の と な っ て い る の で は な い か と 考 え ら れ る .さ ら に ,C3 以 外 の 印 象 で は「 か わ い い 」, 「 か っ こ い い 」,「 www」と い っ た 単 語 の 別 の 表 現 も DF 値 の 差 が「 0.2 以 上 」の 特 徴 的 な 単 語 と し て 多 く 出 現 し
て い る の に 対 し て ,C3 は「 か っ こ い い 」以 外 の 表 現 に つ い て は ,DF 値 の 差 が 0.2 以 上 に な っ て い る も の が な か っ た . こ れ か ら 表 記 の 違 い に よ っ て DF 値 の 差 が 低 く な っ て い る の で は な い こ と が 分 か る . こ の こ と か ら も C3 の 「 か っ こ い い 」 と い う 印 象 が C4 や Valence の 「 か っ こ い い 」 よ り も 印 象 と し て 弱 く な っ て い る こ と が 考 え ら れ る . C5( 滑 稽 な )の み「 www」と い う 単 語 が 特 に 頻 出 し て お り , こ の 印 象 軸 が ほ か の 印 象 軸 と は 特 に か け 離 れ た 固 有 の 特 徴 を 持 っ て い る こ と が 分 か っ た .C5 の 印 象 軸 の み が 固 有 の 特 徴 を 持 っ た 理 由 と し て は ,「 面 白 い 」 と い う 意 味 の 表 現 の ネ ッ ト ス ラ ン グ は「 www」と い う 表 現 以 外 ほ ぼ 使 わ れ て い な い た め で あ る と 考 え ら れ る . 表 3 DF 値 の 差 が 「 0.1 以 上 0.2 未 満 」 の 8 つ の 印 象 軸 の 特 徴 的 な 単 語 C1(堂 々 ) 最 高 ,イ ラ ス ト ,今 ,ア ニ メ ,萌 え , 明 日 , 嫁 , love, 元 気 , 愛 , 歳 ,調 教 ,胸 ,頭 ,投 稿 ,神 ,幸 せ ,楽 し い ,大 好 き ,リ ン ,天 使 , 絶 対 ,友 達 ,流 れ ,誕 生 ,ミ リ オ ン , 爽 や か , 再 生 , 本 家 , 結 婚 , カ ラ オ ケ ,一 番 ,夏 ,行 く ,高 い , お め で と う , レ ン C2(元 気 が 出 る ) 萌 え , 爽 や か , 歌 , 絵 , ア ニ メ , 普 通 ,嫁 ,love,サ ビ ,胸 ,投 稿 , 元 気 , 天 使 , ミ ク , 誕 生 , 弾 幕 , 明 日 ,幸 せ ,夏 ,画 質 ,青 春 ,人 気 , 恋 , 今 日 , 歳 C3(切 な い ) 鳥 肌 ,調 教 ,声 ,イ ケ レ ン ,人 間 C4(激 し い ) リ ン ,ギ タ ー ,希 望 ,鳥 肌 ,カ ラ オ ケ ,サ ビ ,最 高 ,イ ラ ス ト ,評 価 ,伸 び ろ ,大 好 き ,苦 手 ,ベ ー ス C5(滑 稽 ) 面 白 い ,意 味 ,性 ,か わ い い ,嫌 , 楽 し い ,セ ン ス ,シ ュ ー ル ,お め で と う ,人 ,癖 ,怖 い ,動 く ,ひ ど い ,市 場 ,カ オ ス ,不 思 議 ,頭 , 子 C6(か わ い い ) 俺 ,歌 ,www,ア ニ メ ,弾 幕 ,爽 や か ,ミ ク ,嫁 ,画 質 ,絵 ,普 通 , 職 人 ,目 ,泣 け る ,誕 生 ,恋 ,色 Valence www,ギ タ ー ,リ ン ,PV,中 毒 , 絵 , 神 , 服 , 理 解 , 流 石 , 配 信 , 動 画 , 相 変 わ ら ず Arousal www,萌 え ,元 気 ,爽 や か ,ア ニ メ , 普 通 , ミ ク 表 3 は ,表 2 と 異 な り DF 値 の 差 が「 0.1 以 上 0.2 未 満 」 の 特 徴 的 な 単 語 に つ い て ま と め た も の で あ る . 「 か わ い い 」と い う 単 語 が 頻 出 語 と し て 出 て き た C1, C2,C6,Arousal の 間 に は「 爽 や か 」「 ミ ク 」「 嫁 」な ど の よ う に 重 複 し て い る 部 分 が 多 く , あ ま り 違 い が な い こ と が 分 か る . こ れ は 上 述 し た よ う に 「 か わ い い 」 に は 様 々 な 使 わ れ 方 が あ る が , こ れ ら の 「 か わ い い 」 に 含 ま れ て い る イ メ ー ジ が ほ ぼ 同 じ に な っ て い る と い う こ と が 原 因 で あ る と 考 え ら れ る . 一 方 ,「 か っ こ い い 」と い う 単 語 が 頻 出 語 と し て 出 て き た C3, C4, Valence の 間 に は , 印 象 ご と に 使 用 さ れ て い る 単 語 に 違 い が 出 て き て い る こ と が 分 か る . 例 え ば , C3 で は 「 調 教 」 や 「 声 」 と い っ た VOCALOID の ボ ー カ ル に 関 す る 単 語 と ,「 綺 麗 」や「 イ ケ レ ン 」と い っ た 映 像 に 関 す る 単 語 が 出 て き て い る .ま た ,C4 で は , 「 ギ タ ー 」 や 「 ベ ー ス 」 と い っ た 楽 器 の 名 前 が 多 く あ る こ と か ら バ ン ド 調 の 音 楽 動 画 が 多 い こ と が 考 え ら れ る .Valence で は「 www」や「 中 毒 」と い っ た C5 に 多 く 出 現 し て い た コ メ ン ト が 出 現 し て い る が ,こ れ は C3, C4 に な い 特 徴 で あ り ,「 か っ こ い い 」 と い う 印 象 に 加 え て 「 面 白 い 」 と い う 印 象 も 一 緒 に 持 っ て い る 音 楽 動 画 が 多 い こ と が 考 え ら れ る . 「 www」 と い う コ メ ン ト が 頻 出 し て い た C5 に つ い て は 「 シ ュ ー ル 」 や 「 カ オ ス 」,「 不 思 議 」 と い っ た よ う な ほ か の 印 象 に ほ と ん ど 出 現 し て い な い 単 語 が 数 多 く 使 用 さ れ て い る . こ の こ と か ら も C5 の 印 象 軸 が 固 有 の 特 徴 を 持 っ て い る こ と が 分 か る . ま た 文 書 内 で 出 現 す る 頻 度 を 表 す TF 値 ( こ こ で は あ る 動 画 に 対 し て 投 稿 さ れ た コ メ ン ト 集 合 に 含 ま れ る 単 語 の 比 率 )に よ る 閾 値 を 利 用 し た 分 析 も 行 っ た .TF 値 が 0.01 以 上 か つ DF 値 が 0.1 以 上 と な っ た 単 語 を ピ ッ ク ア ッ プ し た も の を 表 4 に ま と め る . 表 4 TF 値 0.01 以 上 か つ DF 値 0.1 以 上 の 8 つ の 印 象 軸 の 特 徴 的 な 単 語 C1(堂 々 ) か わ い い , 絵 , www C2(元 気 が 出 る ) か わ い い , 絵 , 歌 , www C3(切 な い ) か っ こ い い ,声 ,調 教 ,神 ,綺 麗 , す ご い ,曲 ,素 敵 ,絵 ,歌 ,レ ン , 鳥 肌 C4(激 し い ) か っ こ い い , 最 高 , 声 , や ば い , リ ン , サ ビ , 大 好 き , 鳥 肌 C5(滑 稽 ) www, か わ い い , 中 毒 C6(か わ い い ) か わ い い , ミ ク , 絵 , 歌 Valence か っ こ い い , www, サ ビ , 最 高 , リ ン , ル カ , 絵 , や ば い Arousal か わ い い , www 表 2 と 表 4 を 比 較 す る と 表 2 に あ る 単 語 は ど れ も 表 4 に 出 て き て お り , DF 値 「 0.2 以 上 」 の 単 語 は そ も そ も TF 値 が 高 い こ と が 分 か る . ま た , 表 3 と 表 4 を 比 較 し て み る と ,「 か わ い い 」が 頻 出 語 と し て 出 て き た C1, C2, C6, Arousal に つ い て は ど れ も 出 現 す る 単 語 の 種 類 が 激 減 し て い る こ と が 分 か っ た .ま た ,「 か っ こ い い 」 が 頻 出 語 と し て 出 現 し て い る C3, C4, Valence で は そ れ ぞ れ に 特 徴 が 出 て い た .C3 は「 神 」「 曲 」「 素 敵 」の
よ う に 表 3 で 表 れ て い た 単 語 で は な い 単 語 も い く つ か 出 て い た . C4 に 関 し て は , 表 3 で は 「 ギ タ ー 」「 ベ ー ス 」 と い っ た 楽 器 に 関 す る 単 語 が 特 徴 的 な 単 語 と な っ て い た が ,TF 値 を 利 用 し た 表 4 で は 出 現 し な く な っ て い る . Valence で は 表 3 と 表 4 で 出 現 す る 単 語 が 大 き く 変 わ っ て い る .「 www」が 頻 出 語 と し て 出 現 し て い る C5 に つ い て は 表 3 で 出 現 し て い た 単 語 は 「 か わ い い 」 し か 残 っ て お ら ず , 繰 り 返 し 用 い ら れ る 単 語 は ほ と ん ど 存 在 し な い と い う こ と が 分 か っ た . 以 上 の こ と よ り , 特 に 頻 出 す る 語 句 で あ る 程 度 の 印 象 カ テ ゴ リ を 推 定 し , そ れ 以 外 に 出 て く る 語 で そ の 中 で も ど の よ う な 印 象 に 分 類 さ れ る の か と い う こ と を 推 定 す る 方 法 が 考 え ら れ る .
4. 検 索 意 図 に 応 じ た サ ム ネ イ ル 動 画 生 成
本 稿 で は , ユ ー ザ の 検 索 意 図 は 検 索 ク エ リ に 埋 め 込 ま れ た 印 象 語 に 特 に あ ら わ れ る と 考 え ( 固 有 名 詞 や ジ ャ ン ル な ど の 名 詞 は 最 低 限 の 絞 り 込 み の た め の 語 と し て 考 え る ),サ ム ネ イ ル 動 画 自 動 生 成 に お い て は そ の 印 象 語 に 対 応 し た 該 当 部 分 を 切 り 出 し て 利 用 す る . こ こ で 印 象 語 に つ い て は , 表 1 に 示 す 印 象 軸 で 説 明 さ れ て い る 語 句 の み と し た . な お , サ ム ネ イ ル 動 画 の 長 さ に つ い て は , 一 般 的 な テ レ ビ CM と 同 じ 15 秒 に 設 定 し た . シ ス テ ム は , ま ず ユ ー ザ の 入 力 し た ク エ リ に 応 じ て 動 画 集 合 を 限 定 す る . 次 に , 印 象 語 が ク エ リ に 含 ま れ て い る 場 合 に , 表 1 を 元 に し た 辞 書 を 用 い て ユ ー ザ が ど の 印 象 軸 を 求 め て い る か を 判 定 す る . ま た , そ の 印 象 語 に 最 も 適 切 で あ る 15 秒 を 抽 出 し , ユ ー ザ に サ ム ネ イ ル 動 画 と し て 検 索 結 果 と と も に 提 示 す る も の と な っ て い る . な お , 毎 回 上 記 の 計 算 を 行 う の は 無 駄 で あ る た め , 事 前 に 用 意 し た 8 つ の 印 象 軸 に つ い て そ れ ぞ れ の 動 画 で 適 し て い る 15 秒 を 計 算 し , デ ー タ ベ ー ス に 格 納 し て お き , そ の デ ー タ ベ ー ス か ら 呼 び 出 す こ と で サ ム ネ イ ル 動 画 を ユ ー ザ に 返 す . 今 回 , サ ム ネ イ ル 動 画 の 生 成 に お い て は , 先 述 の 形 態 素 解 析 を 用 い た 手 法 に 加 え , ニ コ ニ コ 動 画 上 の コ メ ン ト が 形 態 素 解 析 に 適 し て い な い 可 能 性 を 考 慮 し て ト リ グ ラ ム を 用 い た 手 法 を 用 意 し た . 形 態 素 解 析 を 用 い た 手 法 で は , ま ず 表 2, 表 3 に あ る 単 語 が 入 っ て い る コ メ ン ト を 抽 出 し , そ れ ら を コ メ ン ト が 行 わ れ た 時 間 軸 で 並 べ る . そ の 後 , 一 番 コ メ ン ト の 量 が 多 か っ た ,連 続 し た 15 秒 を 抽 出 す る .さ ら に 抽 出 し た 15 秒 内 の す べ て の コ メ ン ト の 中 で の 表 2,表 3 に あ る 単 語 が 含 ま れ る コ メ ン ト の 割 合 を 計 算 し , そ の 値 が 0.25 と い う 閾 値 を 超 え て い た 場 合 の み サ ム ネ イ ル 動 画 と し て 抽 出 す る と い っ た 手 法 を 用 い て い る . こ れ に よ り , 8 つ の 印 象 軸 の そ れ ぞ れ に 対 し て 印 象 が よ り 表 れ て い る 動 画 の み に 対 し て サ ム ネ イ ル 動 画 を 生 成 し て い る . 一 方 , ト リ グ ラ ム を 用 い た 手 法 で は , ま ず , す べ て の コ メ ン ト を 3 文 字 ず つ に 区 切 る . そ の 中 で 印 象 軸 ご と に 出 現 頻 度 が 高 い 3 文 字 の 塊 を 収 集 す る . そ の 後 , 形 態 素 解 析 を 用 い た 手 法 と 同 様 に , 印 象 軸 ご と に 収 集 さ れ た 3 文 字 の 塊 を 含 む コ メ ン ト を 抽 出 し , コ メ ン ト さ れ た 時 間 で 並 べ , 一 番 コ メ ン ト が 多 か っ た 15 秒 を 抽 出 す る . さ ら に 抽 出 し た す べ て の コ メ ン ト の 中 で 収 集 さ れ た 3 文 字 の 塊 が 含 ま れ る コ メ ン ト の 割 合 を 計 算 し , 0.2 と い う 閾 値 を 超 え て い た 場 合 の み サ ム ネ イ ル 動 画 と し て 抽 出 す る と い っ た 手 法 を 用 い て い る .5. 評 価 実 験
提 案 す る 印 象 に 基 づ く サ ム ネ イ ル 動 画 自 動 生 成 手 法 の 有 用 性 を 検 証 す る た め , ユ ー ザ ベ ー ス で の 評 価 実 験 を 行 っ た . 5.1. 実 験 方 法 実 験 で は ま ず , 形 態 素 解 析 お よ び ト リ グ ラ ム に よ る 2 手 法 を 用 い , 8 つ の 印 象 値 が 高 い も の に つ い て , 3.2 節 の 印 象 評 価 デ ー タ セ ッ ト で 用 い た 500 個 の 動 画 に 対 し て サ ム ネ イ ル 動 画 を 生 成 し た . こ の 生 成 さ れ た サ ム ネ イ ル 動 画 に つ い て ,8 つ の 印 象 ,2 つ の 生 成 手 法 の そ れ ぞ れ に 対 し て 5 個 ず つ ラ ン ダ ム に 提 示 し た . 評 価 者 に は ,提 示 さ れ る サ ム ネ イ ル 動 画 に 対 し ,8 つ の 印 象 軸 す べ て に つ い て -2~ +2 の 5 段 階 で 評 価 し て も ら っ た . す べ て の 印 象 に つ い て 評 価 し て も ら っ た 理 由 は , そ の 提 示 さ れ て い る 印 象 に 影 響 を 受 け な い よ う に す る た め で あ る .な お ,評 価 者 は 20 代 の 男 子 大 学 生 4 名 で あ る . 5.2. 実 験 結 果 評 価 者 に よ る 印 象 評 価 値 が , 目 的 と す る 印 象 を ど の 程 度 推 定 で き て い た の か の 平 均 を ま と め た も の が 表 5 で あ る . 形 態 素 解 析 を 用 い た 手 法 で は C6 が 高 い 値 を 示 し て お り 形 態 素 解 析 が 効 果 的 に 働 い て い る こ と が わ か る が , ほ か の 軸 に 関 し て は あ ま り 高 い 値 が 得 ら れ な か っ た . 一 方 , Valence, Arousal に つ い て は 評 価 値 が 0 を 下 回 っ て お り う ま く い っ て い な い こ と が わ か る . ト リ グ ラ ム を 用 い た 手 法 で は , C1, C2, C4, C5, Valence が 高 い 値 を 示 し た 一 方 で ,C3,C6,Arousal は 評 価 値 が 0 を 下 回 っ て い た . 次 に 形 態 素 解 析 を 用 い た 手 法 と ト リ グ ラ ム を 用 い た 手 法 を 比 べ る と ,C3,Arousal 以 外 の 軸 で 形 態 素 解 析 と ト リ グ ラ ム で 評 価 値 に 大 き な 差 が あ る こ と が 分 か る . そ の 中 で も C6 や Valence の よ う に ど ち ら か の 手 法 で は 0 を 超 え る 評 価 , も う 片 方 の 手 法 で は 0 を 下 回 る 評価 と な っ た 軸 が あ り , こ れ ら の 軸 に つ い て は 0 を 超 え る 手 法 が 特 に サ ム ネ イ ル 動 画 の 抽 出 に 適 し た 手 法 で あ る 考 え ら れ る . 5.3. 考 察 形 態 素 解 析 を 用 い た 手 法 に お い て , C1, C2, C6, Arousal の 4 軸 で「 か わ い い 」と い う 単 語 が 頻 出 し て い た に も 関 わ ら ず C6 で の み 値 が 高 く な っ て い た . こ の 理 由 と し て は「 か わ い い 」と い う 単 語 が そ も そ も C6 の 印 象 軸 を 表 す 語 と し て 用 い ら れ て い る た め に C1,C2, Arousal の 3 軸 よ り も 印 象 が コ メ ン ト に 出 て き や す い か ら で あ る と 考 え ら れ る . 形 態 素 解 析 に よ る 手 法 で Valence, Arousal の 評 価 値 が 0 を 下 回 っ て い た 理 由 と し て は , 頻 出 語 が 印 象 に 与 え る 影 響 が 少 な い と い う こ と が 考 え ら れ る .Valence に つ い て は ,「 PV」「 理 解 」と い っ た よ う に ど の 印 象 に も 影 響 を 与 え る こ と が な さ そ う な 単 語 が 多 く 出 現 し て お り ,Arousal に つ い て は ,「 萌 え 」「 元 気 」と い っ た よ う な 「 激 し い 」 と は 少 し 違 う 印 象 を 与 え る よ う な 語 が 多 く 出 現 し て い た . こ れ ら の 語 が 多 い 箇 所 が サ ム ネ イ ル 動 画 抽 出 の 箇 所 に 選 ば れ て し ま っ た た め に 評 価 値 が 低 く な っ て し ま っ た の で は な い か と 考 え ら れ る . ト リ グ ラ ム を 用 い た 手 法 に お い て は , C1, C2, C4, C5, Valence が 高 評 価 と な っ て い た . こ の 理 由 と し て は ,C1,C2 の 軸 で は ,頻 出 す る 単 語 が 1 文 字 や 2 文 字 の も の が 多 く ,同 じ「 か わ い い 」が 頻 出 し て い た C6 や Arousal よ り も 頻 出 す る 単 語 が 表 れ や す か っ た こ と が 考 え ら れ る .C4,Valence に 関 し て は「 か っ こ い い 」と い う 単 語 の 一 部 が 多 く 出 現 し て お り , ま た C4 に 関 し て は 「 ロ ッ ク 」 と い う 音 楽 の ジ ャ ン ル に 関 す る 語 が , Valence に 関 し て は「 www」と い う 語 が 多 く 出 現 し て お り , こ の 部 分 が 抽 出 さ れ 高 い 評 価 が 出 た の で は な い か と 考 え ら れ る .C5 に 関 し て は「 www」と い う 語 が ほ か に 比 べ 圧 倒 的 に 多 く 抽 出 さ れ て お り ,「 滑 稽 」と い う 印 象 と あ っ て い た た め に う ま く 抽 出 で き た と 考 え ら れ る . 一 方 ,C3,C6,Arousal が 低 評 価 と な っ て い た が ,こ の 理 由 と し て は , ト リ グ ラ ム に お い て こ の よ う な 3 文 字 の 塊 が う ま く 抽 出 さ れ て お ら ず , 印 象 に あ っ た 箇 所 が う ま く 抽 出 さ れ な か っ た の で は な い か と 考 え ら れ る . C6 に 関 し て は ,「 か わ い い 」 と い う 単 語 の 表 記 の 方 法 と し て 平 仮 名 や カ タ カ ナ ,漢 字 な ど と い っ た 違 い や「 か わ ゆ い 」 と い っ た よ う な 表 記 が 混 ざ っ て し ま い 抽 出 の 箇 所 が ぶ れ て し ま っ た と い う こ と が 考 え ら れ る . Arousal に 関 し て は C6 の 軸 と 同 じ 理 由 に 加 え て ,頻 出 し て い た 単 語 が ト リ グ ラ ム で 抽 出 し た 際 に ほ と ん ど 現 れ な く な っ て い た こ と が 原 因 と 考 え ら れ る . 形 態 素 解 析 を 用 い た 手 法 と ト リ グ ラ ム を 用 い た 手 法 の 比 較 か ら , そ れ ぞ れ の 軸 で サ ム ネ イ ル 動 画 の 生 成 に 適 し て い る 手 法 が 違 っ て い る た め , ユ ー ザ の 求 め る 印 象 に 応 じ て 切 り 替 え る こ と が 重 要 で あ る と 考 え ら れ る . 今 回 の 実 験 で 抽 出 し た サ ム ネ イ ル 動 画 の う ち , 同 一 の 動 画 内 で 複 数 の 印 象 軸 で も サ ム ネ イ ル 動 画 が う ま く 生 成 で き た 例 が 多 数 あ っ た . こ こ で は , C1, C2, C6, Arousal か ら な る「 か わ い い 」が 特 徴 的 な グ ル ー プ ,C3, C4,Valence か ら な る「 か っ こ い い 」が 特 徴 的 な グ ル ー プ , C5 か ら な る 「 www」 が 頻 出 す る グ ル ー プ の う ち , 異 な る グ ル ー プ に 属 す る 軸 に 対 し て 抽 出 す る 場 合 に う ま く 抽 出 で き て い る こ と が 多 か っ た( 例 え ば C1 と C5 に つ い て は う ま く 抽 出 で き る こ と が 多 く , C1 と C6 に つ い て は う ま く 抽 出 で き る こ と が 少 な い ).こ の 理 由 と し て は ,「 か わ い い 」「 か っ こ い い 」「 www」の 3 つ の 単 語 は 印 象 の 方 向 性 が 全 く 違 う も の で あ る と い う こ と が 考 え ら れ る . 同 一 の 動 画 内 で 印 象 が 大 き く 変 化 す る も の で は「 か わ い い 」と コ メ ン ト さ れ る 箇 所 ,「 か っ こ い い 」と コ メ ン ト さ れ る 箇 所 ,「 www」と コ メ ン ト さ れ る 箇 所 が は っ き り と 分 か れ て い る こ と が 多 い た め , 印 象 に 適 し た 箇 所 が そ れ ぞ れ の 軸 で 生 成 で き た の で は な い か と 考 え ら れ る . 一 方 , 著 者 の 主 観 で は 動 画 内 か ら 他 に サ ム ネ イ ル 動 画 と し て 適 し て い る 箇 所 が あ る に も か か わ ら ず , 適 し て い な い 箇 所 を 抽 出 し て し ま っ て い る 例 も あ り , こ れ は C5( 滑 稽 )の 軸 で の 抽 出 が 大 半 で あ っ た .こ の 理 由 と し て は ,「 www」と い う 語 が 関 係 の な い コ メ ン ト の 後 ろ に と り あ え ず 付 与 す る と い う 感 覚 で 用 い ら れ る こ と が 原 因 と し て 考 え ら れ る . 特 に 動 画 の 序 盤 に は 「 う ぽ つ 」 と い っ た よ う な , ど の 動 画 に も 同 じ よ う に 用 い ら れ る 決 ま り 文 句 の よ う な コ メ ン ト が あ り , そ の よ う な コ メ ン ト に「 www」と い う コ メ ン ト が 用 い ら れ て し ま う こ と で 本 来 抽 出 す べ き 箇 所 が 抽 出 で き な く な っ て い る と 考 え ら れ る .ま た ,C5 の 印 象 に あ っ て い る 箇 所 に 付 与 さ れ る コ メ ン ト は「 www」と い う 語 が 単 体 で 用 い 表 5 形 態 素 解 析 , ト リ グ ラ ム の そ れ ぞ れ の 手 法 で 生 成 さ れ た サ ム ネ イ ル 動 画 の 評 価 C1 堂 々 C2 元 気 が 出 る C3 切 な い C4 激 し い C5 滑 稽 C6 か わ い い Valence 楽 し い Arousal 積 極 的 平 均 形 態 素 解 析 0.10 0.05 0.05 0.25 0 0.80 -0.35 -0.15 0.09 ト リ グ ラ ム 0.60 0.50 -0.25 0.80 0.55 -0.70 0.40 -0.10 0.23
ら れ て い る こ と が 多 か っ た た め ,こ の 問 題 に つ い て は , 「 www」と い う 語 の み で 形 成 さ れ て い る コ メ ン ト の み を 用 い る こ と で 解 決 で き る の で は な い か と 考 え ら れ る .
6. ま と め
本 稿 で は , 500 個 の 動 画 に 対 す る 8 軸 の 印 象 評 価 か ら な る 印 象 評 価 デ ー タ セ ッ ト を 用 い , そ れ ぞ れ の 印 象 に 対 し て 頻 出 す る 単 語 の 分 析 を 行 っ た .そ の 結 果 ,C1, C2,C6,Arousal か ら な る「 か わ い い 」が 頻 出 す る グ ル ー プ ,C3,C4,Valence か ら な る「 か っ こ い い 」が 頻 出 す る グ ル ー プ ,C5 か ら な る「 www」が 頻 出 す る グ ル ー プ の 3 つ の グ ル ー プ に 大 き く 分 け ら れ る こ と が 分 か っ た . ま た , C1, C2, C6, Arousal の 4 軸 に つ い て は 出 現 す る 単 語 に は あ ま り 違 い が 見 ら れ な か っ た が , C3, C4, Valence の 3 軸 に つ い て は 違 い が 見 ら れ た . こ の こ と か ら , 特 に 頻 出 す る 単 語 を 用 い て あ る 程 度 の 印 象 推 定 を 行 い , そ れ 以 外 に 出 て く る 語 で さ ら に 印 象 を 絞 り 込 ん で い く こ と の 重 要 性 が 示 唆 さ れ た . さ ら に , 形 態 素 解 析 を 用 い た 手 法 と ト リ グ ラ ム を 用 い た 手 法 の 2 種 類 の サ ム ネ イ ル 動 画 の 生 成 手 法 を 提 案 し , 評 価 実 験 を 実 施 し た .そ の 結 果 ,C3,Arousal で は ど ち ら の 手 法 で も 印 象 に あ っ た サ ム ネ イ ル 動 画 は 生 成 で き な か っ た が C6 は 形 態 素 解 析 ,C1,C2,C4,C5,Valence は ト リ グ ラ ム の 手 法 で 生 成 し た サ ム ネ イ ル 動 画 が ユ ー ザ の 求 め る 印 象 に 近 い 箇 所 を 抽 出 す る こ と が 出 来 て い る こ と が 分 か っ た . 今 後 の 課 題 と し て は , ま ず 今 回 の 評 価 実 験 で は 各 印 象 軸 に つ い て そ れ ぞ れ 5 個 の 動 画 し か 評 価 し て も ら っ て お ら ず , さ ら に 評 価 者 も 4 人 と 少 な い . ま た , 形 態 素 解 析 に つ い て は C1,C2,C3,C5 と い っ た 軸 の 評 価 値 が 0 あ た り に ま と ま っ て し ま っ て お り , 必 ず し も 評 価 値 が 収 束 し て い る と は 言 い 切 れ な い . よ っ て 評 価 の 動 画 数 や 評 価 者 を 増 や し て 再 実 験 を 行 う 必 要 が あ る . 一 方 ,今 回 の 研 究 に お い て の 印 象 に つ い て ,3.2 節 で 紹 介 し て い る 8 つ の 印 象 軸 を 利 用 し た が , 印 象 の 種 類 は 数 多 く あ る た め に , 印 象 軸 に つ い て の 分 析 を 行 い , 印 象 軸 の 増 減 に つ い て の 議 論 を 行 っ て い く 必 要 が あ る . 今 回 の 研 究 で は , 形 態 素 解 析 の た め ニ コ ニ コ 動 画 に 投 稿 さ れ た コ メ ン ト を そ の ま ま 利 用 し て い る が , ニ コ ニ コ 動 画 に 投 稿 さ れ た コ メ ン ト は 日 本 語 と し て 崩 れ て い る も の が 多 い た め , 単 語 が 違 う も の と し て 判 断 さ れ て い る 可 能 性 が あ る .こ の 問 題 に 関 し て は Brody ら [12] が 行 っ て い る 正 規 化 を コ メ ン ト に 対 し て 行 う こ と で 解 決 が で き る と 考 え ら れ る た め , 今 後 正 規 化 処 理 を 行 っ て い く 必 要 が あ る . ま た , 今 回 の 研 究 で は , 単 語 間 の 共 起 関 係 に 関 し て は 十 分 に 調 査 ・ 分 析 で き て い な い . 頻 出 語 と の 組 み 合 わ せ に よ っ て 印 象 の 絞 り 込 み が 行 え る と 考 え ら れ る の で 今 後 調 査 す る 必 要 が あ る . 今 回 ,サ ム ネ イ ル 動 画 の 長 さ を 15 秒 と 設 定 し た が , 必 ず し も 15 秒 提 示 す る 必 要 は 無 く , こ の 15 秒 と い う 時 間 を さ ら に 短 く す る こ と で 内 容 が よ り 伝 わ り や す く な る 動 画 の 存 在 も 考 え ら れ る . そ の よ う な 動 画 の 調 査 と , サ ム ネ イ ル 動 画 の 長 さ を 固 定 の 長 さ で は な く 可 変 の 長 さ に す る 手 法 の 考 案 に つ い て も 今 後 行 っ て い く 必 要 が あ る . 謝 辞 本 研 究 の 一 部 は JST, CREST, 明 治 大 学 重 点 研 究 A, 重 点 研 究 B の 支 援 を 受 け た も の で あ る .参 考 文 献
[1] 石 黒 信 啓 , 白 井 治 彦 , 黒 岩 丈 介 , 小 高 知 宏 , 小 倉 久 和 :文 章 要 約 の 手 法 を 用 い た ダ イ ジ ェ ス ト 動 画 の 製 作 手 法 ,情 報 処 理 学 会 創 立 50 周 年 記 念 (第 72 回 )全 国 大 会 (5W-1),pp.491-492(2010) [2] 小 川 一 昭 ,服 部 哲 ,速 水 治 夫 :視 聴 者 か ら の コ メ ン ト 情 報 を 用 い た ダ イ ジ ェ ス ト 動 画 疑 似 生 成 方 法 の 提 案 , 情 報 処 理 学 会 研 究 報 告 (2009-GN-71) , pp.146-150(2009) [3] 磯 貝 佳 輝 ,齋 藤 義 仰 ,村 山 優 子 :視 聴 者 コ メ ン ト を 用 い た 動 画 検 索 支 援 の た め の 紹 介 動 画 作 成 手 法 の 提 案 ,情 報 処 理 学 会 論 文 誌 コ ン シ ュ ー マ ・ デ バ イ ス & シ ス テ ム ,Vol.2 No.1 pp74-81(2012) [4] 中 村 聡 史 ,山 本 岳 洋 ,後 藤 真 孝 ,濱 崎 雅 弘 :視 聴 者 反 応 と 音 楽 的 特 徴 量 を 用 い た サ ム ネ イ ル 動 画 の 自 動 生 成 , WebDB Forum 2012 [5] 高 見 真 也 ,田 中 克 己 :ウ ェ ブ 検 索 結 果 に 応 じ た ス ニ ペ ッ ト 生 成 , 情 報 処 理 学 会 論 文 誌 , Vol.49 No.4 pp1648-1656(2008) [6] 土 屋 駿 貴 ,中 村 聡 史 ,山 本 岳 洋 :ソ ー シ ャ ル コ メ ン ト か ら の 音 楽 動 画 印 象 推 定 に 関 す る 検 討 ,情 報 処 理 学 会 論 文 誌 [7] 大 野 直 紀 , 中 村 聡 史 , 山 本 岳 洋 , 後 藤 真 孝 : 音 楽 動 画 へ の 印 象 評 価 デ ー タ セ ッ ト 構 築 と そ の 特 性 の 調 査 ,情 報 処 理 学 会 研 究 報 告 ,Vol.2015-MUS-108, No. 7, pp. 1-9 (2015). [8] 後 藤 真 孝 : SmartMusicKIOSK: サ ビ 出 し 機 能 付 き 音 楽 視 聴 機 ,情 報 処 理 学 会 論 文 誌 ,Vol.44,No. 11, pp. 2737-2747 (2003) [9] 山 本 岳 洋 , 中 村 聡 史 : 楽 曲 動 画 印 象 デ ー タ セ ッ ト の 作 成 と そ の 分 析 , ARG 第 2 回 Web イ ン テ リ ジ ェ ン ス と イ ン タ ラ ク シ ョ ン 研 究 会 (2013). [10] 山 本 岳 洋 ,中 村 聡 史 :視 聴 者 の 時 刻 同 期 コ メ ン ト を 用 い た 楽 曲 動 画 の 印 象 分 類 ,情 報 処 理 学 会 ,Vol6, No3, pp61-72(2013)[11] Miyamori , H ., Nakamura , S ., and Tanaka , K:Generation of Views of TV Content Using TV Viewers’ Perspectives Expressed in Live Chats on the Web , In Proc . of ACM Multimedia2005 , pp853-861(2005)
[12] Brody , S . and Diakopoulos , N: Cooooooooooooooollllllllllllll!!!!!!!!!!!!!!: Using word lengthening to detect sentiment in microblogs, Proc.Conference on Empirical Methods in Natural Language Processing, pp.562-570(2011)