LEMON:実行誘導プレトレーニングによる言語ベース環境マニピュレーション【JST・京大機械翻訳】

Shi Qi; Liu Qian; Chen Bei; Zhang Yu; Liu Ting; Lou Jian-Guang

プレプリント

J-GLOBAL ID：202202213404395813 整理番号：22P0277241

LEMON:実行誘導プレトレーニングによる言語ベース環境マニピュレーション【JST・京大機械翻訳】

LEMON: Language-Based Environment Manipulation via Execution-Guided Pre-training

出版者サイト {{ this.onShowPLink() }} 複写サービスで全文入手
高度な検索・分析はJDreamⅢで

この文献はプレプリントです。プレプリントについてはこちらをご確認ください。

著者 (6件)： , , , , ,
資料名：
発行年： 2022年01月20日プレプリントサーバーでの情報更新日： 2022年10月24日
JST資料番号： O7000B 資料種別：プレプリント
記事区分：プレプリント発行国：アメリカ合衆国 (USA) 言語：英語 (EN)

言語ベースの環境操作は,自然環境の巨大な空間のために困難な自然言語命令に従って環境を操作するエージェントを必要とする。この課題に取り組むために,最近の研究で様々なアプローチが提案されている。これらのアプローチは,それらの意図された環境に対してよく働くが,環境を横断して一般化することは困難である。本研究では,言語ベースの環境操作タスクのための一般的なフレームワークであるLEMONを提案した。特に,言語ベースの環境マニピュレーションタスクのためのタスク診断手法を最初に指定し,同じ生成言語モデルを用いて様々な環境を扱うことができる。次に,著者らは,純粋な合成予訓練コーパスを有する言語モデルに対する環境の事前知識を注入するための実行誘導事前訓練戦略を提案した。Alchemy,Scene,Tangram,ProParaおよびRecipisを含むタスクに関する実験結果は,LEMONの有効性を実証して,それは4つのタスクに関して新しい最先端の結果を達成して,実行誘導プレトレーニング戦略はすべての実験タスクに関して顕著な改良をもたらした。【JST・京大機械翻訳】

, , , , , , , , ,
, , 【Automatic Indexing@JST】

自然語処理 , パターン認識

, , , ,

前のページに戻る