言語分布のエントロピーの推定【JST・京大機械翻訳】

Arora Aryaman; Meister Clara; Cotterell Ryan

プレプリント

J-GLOBAL ID：202202202406804670 整理番号：22P0324966

言語分布のエントロピーの推定【JST・京大機械翻訳】

Estimating the Entropy of Linguistic Distributions

出版者サイト {{ this.onShowPLink() }} 複写サービスで全文入手
高度な検索・分析はJDreamⅢで

この文献はプレプリントです。プレプリントについてはこちらをご確認ください。

著者 (3件)： , ,
資料名：
発行年： 2022年04月04日プレプリントサーバーでの情報更新日： 2022年04月04日
JST資料番号： O7000B 資料種別：プレプリント
記事区分：プレプリント発行国：アメリカ合衆国 (USA) 言語：英語 (EN)

Shannonエントロピーは,しばしば,人間言語のコミュニケーション能力を研究するリングリストへの関心の数量である。しかし,研究者が,これらのデータを生じさせる根底にある確率分布にアクセスしていないので,エントロピーは観測データから典型的に推定されなければならない。エントロピー推定は,他の分野でよく研究されている問題であるが,言語データを用いるためのエントロピー推定子の有効性の包括的な探索はまだない。本研究では,このボイドを埋め,言語分布に対する異なるエントロピー推定量の経験的有効性を研究した。2つの最近の情報理論的言語学研究の複製において,著者らは,報告された効果サイズが,貧弱なエントロピー推定子に対する過剰信頼性により過大評価される証拠を見出した。最後に,本稿は,分布タイプとデータアベイラビリティに依存するエントロピー推定のための具体的推奨事項を終えた。【JST・京大機械翻訳】

, , , , , , , , ,
, , , 【Automatic Indexing@JST】

人工知能 , システム・制御理論一般

, , ,

前のページに戻る