自然言語処理における統計モデル
統計的自然言語処理におけるMCMC法
... 京大コーパスの教師なし形態素解析結果 一方 、 村山富市 首相 の 周囲 に も 韓国 の 状況 や 立場 を 知 る 高官 は い ない 。 日産自動車 は 、 小型 乗用車 「 ブルーバード 」 の 新 モデル ・ Ｓ Ｖ シリーズ ５ 車種 を １２ 日 から 発売 した 。 ...
49
自然言語処理21_125
... テレビや新聞などのマスメディアが占める割合が大きいが，このようなマスメディアに首長以 外の地方議会議員が取り上げられることはほとんどない．地方議会議員は国会議員と同様に住 民による選挙によって選ばれ，かつ，国政よりも身近な存在であるべきであるにもかかわらず， その活動に関する認知度が低いのは大きな問題であると考える．そこで，住民に提供される地 方政治の情報，特に地方議会議員に関する情報量の不足を解決するための方法の一つとして， Web ...
31
PDFファイル 1A2 「自然言語処理」
... The 28th Annual Conference of the Japanese Society for Artificial Intelligence, 2014 4. 検証方法 ユーザの行動について効果の程度を検証するには AB テス トが有用である。ウェブにおける AB テストは、あらかじめ 検証したいページや構成・図表について、 2 種類またはそれ以 上のものを用意し、訪問者に対してそれぞれのものの出現が等 ...
3
木オートマトン•トランスデューサによる 自然言語処理
... Huang & Chiang 05のAlgorithm2 • 各状態で累積重み上位k個の仮説を効率的に求める • 例: 状態 q0 における累積重み上位3個の仮説を求め る (3 × 3 + 3 × 3 = 18通り) q 2 X(q 1 q 2 ) −−→ q 0.5 0 0.6 0.4 0.3 ...
113
自然言語処理16_5_79
... 係り受け関係を用いる．このとき，係り受け関係で構成された事態の間に存在する共起パター ンを認識するためにも係り受けを用いることは自然であると考えられる．そのため，我々は係 り受け関係に基づく共起パターンを用いることにする． 事態間の関係を十分に表現しつつも事態対との共起が疎にならないような共起パターンを設 計することが重要である．なぜならば，事態間の関係を十分に表現するために共起パターンに ...
22
自然言語処理16_2_45
... 用いた英語学習教材の自動作成― 神谷 健一 † ・田中 省作 †† ・北尾 謙治 ††† 本稿ではデータベース・ソフトウェアの１つである FileMaker Pro による，英語学 習教材の自動作成における言語処理技術と教材作成の連携可能性を提案する．著者 は，実際の英語の授業でも利用しやすいプリント教材や簡易 E-learning 教材を出力 ...
14
自然言語処理19_3
... 小節の中には， 「Mac mini」や「MacBook」，「MacBook Air」といった項目が存在する．以後， これらの節見出し，小節タイトル，項目名を term と呼ぶことにする． 図 1 に示す Wikipedia 記事から上位下位関係候補を抽出する処理では，Wikipedia がデータベー スのダンプデータとして提供している MediaWiki ソースコード（図 2）を利用する．MediaWiki ...
21
PDFファイル 1A2 「自然言語処理」
... 稿では，紙面の関係上， 「 Wikipedia エントリの言語間対応付 けによる Wikification 」の処理過程については説明しない． なお，実装においては， Wikipedia そのものではなく， SPARQL 言語による問い合わせが可能なエンドポイント ∗4 を 介して， Wikipedia を RDF により構造化したデータである ...
4
自然言語処理におけるDeep Learning
... TPRによるTask 3の解答例．文の意味解析結果から所属関係を取り出し，それをベクトルの外積で 表現する．各文の表現に対し，クエリ𝒇𝒇 𝑇𝑇 を左からかけて，内積が1に最も近い直近の所持者を特定 する (𝒎𝒎 𝑇𝑇 )．Maryは人物なので，𝒎𝒎 𝑇𝑇 をクエリとして，同様の処理で直近の所持者𝒈𝒈 𝑇𝑇 を得る 𝒎𝒎 𝑇𝑇 𝒇𝒇 𝑇𝑇 ...
53
自然言語処理24_705
... 単語の分散表現データ 新納 浩幸 † ・浅原 正幸 †† ・古宮嘉那子 † ・佐々木 稔 † 我々は国語研日本語ウェブコーパスと word2vec を用いて単語の分散表現を構築し， その分散表現のデータを nwjc2vec と名付けて公開している．本稿では nwjc2vec を 紹介し，nwjc2vec の品質を評価するために行った 2 種類の評価実験の結果を報告す ...
16
自然言語処理21_249
... 今後の課題は大きく 3 つある．1 つめは，アノテーション結果を分析することにより明らか になった，アノテーション体系の不備を改めることである．特に，判断の根拠や手がかり語句 の情報を，自然言語処理において使いやすい形で記述する方法を考案する必要がある．2 つめ は，新しいジャンルのテキストに焦点の情報をアノテーションし，コーパスを大きくすること である．現在，BCCWJ ...
22
自然言語処理25_527
... 見られなかったために排除した．交互作用については一般化線形混合モデル構築時に収束した モデルが構築できなかったために今回も考慮しない．今回は，視線走査法の結果のみについて 検討する．統計分析においては，名詞句でない文節も検討し，それぞれ*:NIL とする．また，ラ ベルとして*:neither がついているものについては，統計処理においては*:neither のままと ...
28
PDFファイル 3I3 「自然言語処理による文書要約」
... を定式化し目的関数として導入し， DUC2004 を用いた実験を 行った． 今後の課題としては，初期個体生成における制限を弱くす ることで，多様な個体が生成されるよう改善をしたいと考えて いる．また，より可読性の高い要約生成を行うため，文の長さ [Kupiec 95] や文の位置 [Mani 98] を目的関数として含めた最 適化を行うこと，他の最適化手法との比較を課題とする． ...
3
学位論文 首都大学東京 自然言語処理研究室（小町研）
... 5.5 実験結果 表 5.1a は ， Bi-LSTM を 2 つ の ベ ー ス ラ イ ン で 初 期 化 し た モ デ ル （ FCE+word2vec ， FCE+C&W ， NUCLE+word2vec と NUCLE+C&W ） と提案手法を使ったモデル（ FCE+EWE ， FCE+GWE ， FCE+E&GWE ， NU- CLE+EWE ， NUCLE+GWE と ...
39
学位論文 首都大学東京 自然言語処理研究室（小町研）
... 意味を持つ “lot” を特徴マップ内で考慮することができない。そのため、このモデルでは “admired” の正解ラベルである positive を予測するものと考えられる。 一方、図 6 では図 5 と同様に、 “admired this work” に attention を強くはる特徴マッ プが多く見られることがわかる。また、 “admired this work” と同時に “a lot .” や “lot . ...
13
学位論文 首都大学東京 自然言語処理研究室（小町研）
... 上記の処理に加え，機械翻訳のモデル学習を妨げないよう，次の 3 つの前処理を 行った． 1 つめは，手順に対して行なった前処理である．手順は上記の例にあるよ うに，生データのままでは 1 行に複数の文（句点もしくはピリオドまで文とする） が含まれうる．また，この対訳コーパスは各手順において意味が同等になるように 構築されたため，必ずしも 1 ...
46
愛知工業大学における英語習熟度測定試験の試み : OCRと統計処理言語SASを利用して
... 最後にこの調査にあたり OCR や SAS の使用法や疑問 点に快く応じて下さった愛知工業大学計算機センタ 一、偏差値等の情報を収集していただいた大学広報 課、測定試験に協力くださった英語科および英語非 常勤講師の方々にお礼と感謝の意を表します。 4) 市川伸一，大橋靖雄(竹内啓監修) : SAS による データ解析入門，東京大学出版会， 1987... After [r] ...
10
PDFファイル 3I3 「自然言語処理による文書要約」
... 近年，大量の文書データと接する機会の増加にともない，文 書要約技術の必要性が高まっている．文書要約の一手法として は，要約生成問題を文の組合せ最適化問題として帰着させる方 法がある．最適化手法としては，動的計画法や分岐限定法など の厳密解法を用いた研究が多い．しかし，厳密解法には，要約 対象とする文書集合の大きさに従って，計算時間が膨大に膨れ 上がってしまうという問題が[r] ...
4
PDFファイル 2A1 「自然言語処理」
... 本稿では，トピックモデルにより得られたトピック情報に 基づく文書への自動タグ付与システムを提案した．実際のレ ビュー文書を用いた実験により，提案システムで用いる term- score の単語抽出性能評価を行った．実験結果から， term-score によって，トピックに特徴的な単語を捉え，一般語の順位を下 げることができることを確認した．また，提案システムのタグ 付与性能について，タグの精度と種類数を基に検討を行い，提 ...
4
PDFファイル 2A1 「自然言語処理」
... 本論文では，教育の場で用いられる電子的な文書教材 ( デジ タル教材 ) の良さについて検討する． PC や最近のタブレット端 末の急速な普及により，教育の場で電子的な文書教材が利用 されるケースが広まっている．従来から教育の場で用いられてき た紙の文書の印刷による教材では，コスト上の制限のために， 黒一色を使う場合が最も多く，かなり劣る頻度で黒と赤の二色 が用いられて[r] ...
2