文献

J-GLOBAL ID：201802224101871162   整理番号：18A0749456

単語らしい文字n-gramの埋め込みによる単語の分散表現

著者 (8件)： KIM Geewook (京大 工) ,  KIM Geewook (理研 革新知能統合研究セ) ,  福井一輝 (京大 大学院情報学研究科) ,  福井一輝 (理研 革新知能統合研究セ) ,  羽田哲也 (大阪大 大学院基礎工学研究科) ,  羽田哲也 (理研 革新知能統合研究セ) ,  下平英寿 (京大 大学院情報学研究科) ,  下平英寿 (理研 革新知能統合研究セ)
資料名： 言語処理学会年次大会発表論文集(Web)
巻： 24th  ページ： ROMBUNNO.C6-3 (WEB ONLY)  発行年： 2018年 
JST資料番号： U0384A  ISSN： 2188-4420  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 単語らしい文字n-gramの埋め込みによる新しい単語埋め込み手法を提案する。提案手法は単語分割せずに単語らしい文字n-gramの分散表現を生コーパスから直接構成することで単語埋め込みを実現する。文字n-gramの出現頻度に基づいた先行研究では,複数の単語分割に解釈できる文字列に柔軟に対応できる反面,単語とはいえない文字n-gramまで含めて分散表現を求めてしまうため,抽出した文字n-gramに対する有効な単語の量と,得られる分散表現の質が課題となる。この問題を解決するため,本研究では文字n-gramの期待単語頻度に基づいて埋め込み対象を選択する。評価実験の結果から,提案手法が従来の単語埋め込み手法に比べ,量と質の面から単語の分散表現を効果的に構成できることを確認した。また,単語埋め込みを用いた名詞カテゴリ予測タスクの性能向上にも大きく貢献できることを確認した。(著者抄録)

シソーラス用語： *単語 ,  インデクシング【計算機】 ,  表現 ,  *自然言語処理 ,  埋込み【挿入】 ,  分類 ,  文法 ,  可視化 ,  *頻度
準シソーラス用語： Nグラム ,  分散表現 ,  カテゴリー分類 ,  単語分割 ,  出現頻度

分類 (1件)： 自然語処理  (JE06000L)

タイトルに関連する用語 (5件)： 単語 ,  文字 ,  N-gram ,  埋め込み ,  分散表現