• 検索結果がありません。

自然言語処理における深層学習の進展

N/A
N/A
Protected

Academic year: 2021

シェア "自然言語処理における深層学習の進展"

Copied!
1
0
0

読み込み中.... (全文を見る)

全文

(1)情報処理学会研究報告 IPSJ SIG Technical Report. Vol.2017-MUS-117 No.5 2017/11/25. 自然言語処理における深層学習の進展 岡崎 直観 東京工業大学 情報理工学院 概要 深層学習は、画像処理や音声処理で大成功を収め、今の人工知能ブームの火付け役となり ました。一方、言語処理では記号(例えば単語や文字)による特徴記述がある程度成功して いたため、深層学習の破壊力は限定的でした。その後、言語処理でも研究成果の蓄積が進み、 ほぼ全てのタスクで深層学習およびニューラル・ネットワークに基づく手法が最高性能を 達成するようになりました。本発表では、自然言語処理にどのように深層学習が導入され、 広まっていったのか、という流れを説明します。具体的には、分散表現、エンコーダー・デ コーダー、アテンション・メカニズムなど、言語処理における深層学習の重要なアイディア を復習します。その後、機械翻訳、質問応答、対話文生成、要約文生成、評判分析、知識獲 得、含意関係認識など、様々な言語処理タスクでの応用事例を紹介します。. ⓒ 2017 Information Processing Society of Japan. 1.

(2)

参照

関連したドキュメント

[Nitanda&Suzuki: Fast Convergence Rates of Averaged Stochastic Gradient Descent under Neural Tangent Kernel Regime,

東京工業大学

Optimal stochastic approximation algorithms for strongly convex stochastic composite optimization I: A generic algorithmic framework.. SIAM Journal on Optimization,

東京工業大学

Dual averaging and proximal gradient descent for online alternating direction multiplier method. Stochastic dual coordinate ascent with alternating direction method

情報理工学研究科 情報・通信工学専攻. 2012/7/12

理工学部・情報理工学部・生命科学部・薬学部 AO 英語基準入学試験【4 月入学】 国際関係学部・グローバル教養学部・情報理工学部 AO

関谷 直也 東京大学大学院情報学環総合防災情報研究センター准教授 小宮山 庄一 危機管理室⻑. 岩田 直子