文献

J-GLOBAL ID：201102272777299760   整理番号：11A1591255

ドーパミンニューロンは複数の長期的な将来報酬の価値を符号化する方法を習得する

Dopamine neurons learn to encode the long-term value of multiple future rewards

著者 (16件)： ENOMOTO Kazuki (Kyoto Prefectural Univ. Medicine, Kyoto, JPN) ,  ENOMOTO Kazuki (Tamagawa Univ., Tokyo, JPN) ,  MATSUMOTO Naoyuki (Kyoto Prefectural Univ. Medicine, Kyoto, JPN) ,  MATSUMOTO Naoyuki (Prefectural Univ. Kumamoto, Kumamoto, JPN) ,  NAKAI Sadamu (Kyoto Prefectural Univ. Medicine, Kyoto, JPN) ,  NAKAI Sadamu (Tokyo Univ. Sci., Yamakoshi, JPN) ,  SATOH Takemasa (Kyoto Prefectural Univ. Medicine, Kyoto, JPN) ,  SATOH Takemasa (Tottori Univ., Yonago, JPN) ,  SATO Tatsuo K. (Kyoto Prefectural Univ. Medicine, Kyoto, JPN) ,  SATO Tatsuo K. (Univ. Coll. London, London, GBR) ,  UEDA Yasumasa (Kyoto Prefectural Univ. Medicine, Kyoto, JPN) ,  INOKAWA Hitoshi (Kyoto Prefectural Univ. Medicine, Kyoto, JPN) ,  HARUNO Masahiko (Tamagawa Univ., Tokyo, JPN) ,  HARUNO Masahiko (National Inst. Information and Communications Technol., Tokyo, JPN) ,  KIMURA Minoru (Kyoto Prefectural Univ. Medicine, Kyoto, JPN) ,  KIMURA Minoru (Tamagawa Univ., Tokyo, JPN)
資料名： Proceedings of the National Academy of Sciences of the United States of America  (Proceedings of the National Academy of Sciences of the United States of America)
巻： 108  号： 37  ページ： 15462-15467  発行年： 2011年09月13日 
JST資料番号： D0387A  ISSN： 0027-8424  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： アメリカ合衆国 (USA)  言語： 英語 (EN)

抄録/ポイント： ドーパミンニューロンが長期的な将来報酬のための多段階課題を行う際の時間差分(TD)誤差信号をどの様に符号化するのかは明らかではない。サルが数週間に渡って複数選択課題を習得した前後のドーパミンニューロン活性を測定し,ドーパミン応答が学習を通してTD誤差を表現し,長期的な報酬予測を獲得することを示す。サルは最初に一連の3つの標的を探索し,1つの報酬を獲得する。その後この知識を利用して同じ標的を選択して,次の1つ(2段階選択課題)あるいは2つ(3段階選択課題)の追加報酬を受け取る系で実験を行った。試行開始の合図と強化因子ビープ音へのドーパミン応答はそれぞれ,複数の将来報酬とそれらの誤差の期待値を反映していた。ドーパミンニューロン応答が各試行での報酬1回分だけの予測を表現するのではなく,探索試行で1回,繰り返し試行で2回,合計3回分の報酬の予測を表現することを見出した。多段階課題により報酬を得る過程で,ドーパミン応答が強化学習において時間割引を伴う価値関数理論により定量的に予測されることを明らかにした。

シソーラス用語： *ニューロン ,  符号化 ,  サル ,  問題 ,  *強化学習 ,  *予測 ,  評価関数 ,  *大脳基底核 ,  *意思決定 ,  カテコールアミン ,  第一アミン ,  *ドーパミン作動性ニューロン ,  *終脳
準シソーラス用語： *ドーパミンニューロン ,  *報酬予測

分類 (2件)： 中枢神経系  (EJ12030F) ,  心理学一般  (AE01000T)

物質索引 (1件)： ドーパミン

タイトルに関連する用語 (7件)： ドーパミンニューロン ,  長期 ,  将来 ,  報酬 ,  価値 ,  符号化 ,  習得