折り畳むか否か:バッチ正規化層折畳みに関する必要十分条件【JST・京大機械翻訳】

Yvinec Edouard; Dapogny Arnaud; Bailly Kevin

プレプリント

J-GLOBAL ID：202202214505565112 整理番号：22P0311296

折り畳むか否か:バッチ正規化層折畳みに関する必要十分条件【JST・京大機械翻訳】

To Fold or Not to Fold: a Necessary and Sufficient Condition on Batch-Normalization Layers Folding

出版者サイト {{ this.onShowPLink() }} 複写サービスで全文入手
高度な検索・分析はJDreamⅢで

この文献はプレプリントです。プレプリントについてはこちらをご確認ください。

著者 (3件)： , ,
資料名：
発行年： 2022年03月28日プレプリントサーバーでの情報更新日： 2022年03月28日
JST資料番号： O7000B 資料種別：プレプリント
記事区分：プレプリント発行国：アメリカ合衆国 (USA) 言語：英語 (EN)

バッチ正規化(BN)層は,より複雑な深層ニューラルネットワークアーキテクチャにおける基本的要素になった。このようなモデルは,エッジデバイスへの展開のための加速プロセスを必要とする。しかし,BN層は逐次操作処理のために計算ボトルネックを付加する:従って,加速プロセスの鍵となる,しかししばしば見落とした成分はBN層折畳みである。本論文では,現在のBN折りたたみアプローチが,多くの層が除去できる方法に関して最適であることを示した。したがって,BN折畳みと対応する最適アルゴリズムのための必要十分条件を提供した。提案アプローチは,既存のベースラインよりも系統的に優れており,深層ニューラルネットワークの推論時間を劇的に削減できる。【JST・京大機械翻訳】

, , , , , , ,
, , , 【Automatic Indexing@JST】

パターン認識 , 人工知能

, , ,

前のページに戻る