文献

J-GLOBAL ID：201902249989429676   整理番号：19A0003355

日英ニューラル機械翻訳におけるアテンションを用いた未知語置き換えの手法

Replacement of Unknown Words Using an Attention Model in Japanese to English Neural Machine Translation

著者 (3件)： 伊部早紀 (東大) ,  松田源立 (東大) ,  山口和紀 (東大)
資料名： 自然言語処理  (Journal of Natural Language Processing)
巻： 25  号： 5  ページ： 511-525  発行年： 2018年12月15日 
JST資料番号： L3934A  ISSN： 1340-7619  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： ニューラル機械翻訳では,従来の統計的機械翻訳に比べ文法的に流暢な文が生成されるが,出力結果に未知語が含まれることがしばしば指摘される。この問題に対処する方法としては,学習コーパス中の低頻度語を分割したり,未知語に位置情報を付け加えるなどの方法があるが,どれも日英翻訳では効果が低い。そこで本論文では,アテンションから構成した単語アライメント表を用いて出力文中の未知語と対応する入力文中の単語を見つけ,その単語を翻訳した単語で未知語を置き換えることで未知語をなくす手法を提案する。本論文の有効性を示すためにASPEC,NTCIR-10の2種類のコーパスを用いて実験を行った結果,本論文で提案する単語アライメント表の構成法を用いると,未知語を全く発生させず,かつ,BLEU値を向上させることができた。(著者抄録)

シソーラス用語： *機械翻訳 ,  *ニューラルネットワーク ,  日本語 ,  英語 ,  注意 ,  用語 ,  構文分析 ,  コーパス ,  機械学習 ,  アラインメント
準シソーラス用語： アテンション ,  未知語 ,  学習コーパス ,  出現頻度

分類 (2件)： 自然語処理  (JE06000L) ,  ニューロコンピュータ  (JC06010Q)

引用文献 (25件)：

• Arthur, P., Neubig, G., and Nakamura, S. (2016). “Incorporating Discrete Translation Lexicons into Neural Machine Translation.” In Proceedings of the 2016 Conference on Empirical Methods in Natural Language Processing, pp. 1557-1567.
• Bahdanau, D., Cho, K., and Bengio, Y. (2014). “Neural Machine Translation by Jointly Learning to Align and Translate.” arXiv preprint arXiv:1409.0473.
• Banerjee, S. and Lavie, A. (2005). “METEOR: An Automatic Metric for MT Evaluation with Improved Correlation with Human Judgments.” In Proceedings of ACL Workshop on Intrinsic and Extrinsic Evaluation Measures for Machine Translation And/or Summarization, Vol. 29, pp. 65-72.
• Breen, J. (2000). “A www Japanese Dictionary.” Japanese Studies, 20 (3), pp. 313-317.
• Cho, K., van Merrienboer, B., Gulcehre, C., Bahdanau, D., Bougares, F., Schwenk, H., and Bengio, Y. (2014). “Learning Phrase Representations using RNN Encoder-Decoder for Statistical Machine Translation.” In Proceedings of the 2014 Conference on Empirical Methods in Natural Language Processing (EMNLP), pp. 1724-1734, Doha, Qatar. Association for Computational Linguistics.

タイトルに関連する用語 (5件)： ニューラル機械翻訳 ,  アテンション ,  未知語 ,  置き換え ,  手法