MCoNaLa:多重自然言語からのコード生成のためのベンチマーク【JST・京大機械翻訳】

Wang Zhiruo; Cuenca Grace; Zhou Shuyan; Xu Frank F.; Neubig Graham

プレプリント

J-GLOBAL ID：202202208221670960 整理番号：22P0305038

MCoNaLa:多重自然言語からのコード生成のためのベンチマーク【JST・京大機械翻訳】

MCoNaLa: A Benchmark for Code Generation from Multiple Natural Languages

出版者サイト {{ this.onShowPLink() }} 複写サービスで全文入手
高度な検索・分析はJDreamⅢで

この文献はプレプリントです。プレプリントについてはこちらをご確認ください。

著者 (5件)： , , , ,
資料名：
発行年： 2022年03月16日プレプリントサーバーでの情報更新日： 2023年02月06日
JST資料番号： O7000B 資料種別：プレプリント
記事区分：プレプリント発行国：アメリカ合衆国 (USA) 言語：英語 (EN)

コード生成とコード要約のような自然とプログラミング言語の交差点でのアプリケーションの最近の急増があったが,これらのアプリケーションは通常英語中心である。これは,英語で熟練しないプログラム開発者のための障壁を作り出す。言語にわたる技術開発におけるこのギャップを緩和するために,英語を超えて拡張する自然言語コマンドからコード生成をベンチマークするための多言語データセットMCoNaLaを提案した。英語コード/自然言語チャレンジ(CoNaLa)データセットからの方法論のモデルオフで,スペイン,日本,ロシアの3言語で合計896のNLコードペアを注釈した。最先端のコード生成システムによる試験によるMCoNaLaデータセットの性能の定量的評価を示した。困難は,これらの3つの言語を通して変化するが,すべてのシステムは,それらの英語の対応物の背後に著しく遅れて,新しい言語へのコード生成の適応における課題を明らかにした。【JST・京大機械翻訳】

, , , , , , , , , , ,
, , , 【Automatic Indexing@JST】

自然語処理 , 情報加工一般

, , ,

前のページに戻る