文献

J-GLOBAL ID：201702288865547074   整理番号：17A1392711

LSTM:探索空間の旅【Powered by NICT】

LSTM: A Search Space Odyssey

著者 (5件)： Greff Klaus (Istituto Dalle Molle di studi sull’Intelligenza Artificiale, Scuola universitaria professionale della Svizzera italiana, Manno, Switzerland) ,  Srivastava Rupesh K. (Istituto Dalle Molle di studi sull’Intelligenza Artificiale, Scuola universitaria professionale della Svizzera italiana, Manno, Switzerland) ,  Koutnik Jan (Istituto Dalle Molle di studi sull’Intelligenza Artificiale, Scuola universitaria professionale della Svizzera italiana, Manno, Switzerland) ,  Steunebrink Bas R. (Istituto Dalle Molle di studi sull’Intelligenza Artificiale, Scuola universitaria professionale della Svizzera italiana, Manno, Switzerland) ,  Schmidhuber Jurgen (Istituto Dalle Molle di studi sull’Intelligenza Artificiale, Scuola universitaria professionale della Svizzera italiana, Manno, Switzerland)
資料名： IEEE Transactions on Neural Networks and Learning Systems  (IEEE Transactions on Neural Networks and Learning Systems)
巻： 28  号： 10  ページ： 2222-2232  発行年： 2017年 
JST資料番号： T0881A  ISSN： 2162-237X  CODEN： ITNNEP  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： アメリカ合衆国 (USA)  言語： 英語 (EN)

抄録/ポイント： リカレントニューラルネットワークのための長い短期記憶(LSTM)アーキテクチャのいくつかの変異体は1995年の設立以来,提案されている。近年,これらのネットワークは,さまざまな機械学習問題のための最新のモデルになっている。これは典型的なLSTM変異体の種々の計算成分の役割と有用性を理解する上で新たな関心をもたらした。本論文では,三種類の代表的なタスク:音声認識,手書き文字認識,および多声音楽モデリングに八LSTM変異体の最初の大規模解析を提示した。各タスクのための全てのLSTM変異体のハイパーパラメータはランダム探索を用いて別々に最適化し,それらの重要性は強力な機能解析フレームワークを用いて評価した。全体で,5400回の実験(CPU時間の約15年)の結果,著者らの研究をLSTMネットワーク上でのこの種の最大を要約した。著者らの結果は,変異体のどれも標準LSTMアーキテクチャを有意に改善し,その最も重要な成分であることForgetゲートと出力活性化機能を発揮できないことを示した。をさらに研究ハイパーパラメータは実質的に依存せず,それらの効率的な調整のためのガイドラインを導出したことを観測した。Copyright 2017 The Institute of Electrical and Electronics Engineers, Inc. All Rights reserved. Translated from English into Japanese by JST【Powered by NICT】

シソーラス用語： 計算機アーキテクチャ ,  最適化 ,  音声認識 ,  手書き文字認識 ,  *ネットワーク ,  CPU時間 ,  モデリング ,  機械学習
準シソーラス用語： ランダム探索 ,  ハイパーパラメータ ,  大規模解析 ,  多声音楽 ,  短期記憶 ,  リカレントニューラルネットワーク ,  *探索空間 , 【Automatic Indexing@JST】

分類 (1件)： 人工知能  (JE08000Z)

タイトルに関連する用語 (3件)： LSTM ,  探索空間 ,  旅