空間-時間畳込みを用いたビデオフレーム内挿のための非線形動き推定【JST・京大機械翻訳】

Dutta Saikat; Subramaniam Arulkumar; Mittal Anurag

プレプリント

J-GLOBAL ID：202202214245014354 整理番号：22P0280567

空間-時間畳込みを用いたビデオフレーム内挿のための非線形動き推定【JST・京大機械翻訳】

Non-linear Motion Estimation for Video Frame Interpolation using Space-time Convolutions

出版者サイト {{ this.onShowPLink() }} 複写サービスで全文入手
高度な検索・分析はJDreamⅢで

この文献はプレプリントです。プレプリントについてはこちらをご確認ください。

著者 (3件)： , ,
資料名：
発行年： 2022年01月27日プレプリントサーバーでの情報更新日： 2022年04月12日
JST資料番号： O7000B 資料種別：プレプリント
記事区分：プレプリント発行国：アメリカ合衆国 (USA) 言語：英語 (EN)

ビデオフレーム補間は,ビデオにおける2つの連続したフレーム間の1つまたは複数のフレームを合成することを目的とする。それは,低速運動ビデオ生成,フレームレートアップスケーリングおよび開発ビデオコーデックを含む広範囲の応用を有する。ビデオフレーム間のピクセルごとの線形運動を仮定することにより,いくつかの古い研究がこの問題に取り組む。しかし,物体はしばしば実際の領域における非線形運動パターンに従い,いくつかの最近の方法は非線形モデル(例えば,二次)によってピクセル運動をモデル化することを試みた。また,二次モデルは不正確であり,特に,時間(すなわち,突然のジャーク)とオクルージョンに関する運動不連続性の場合,いくつかの流れ情報が無効または不正確である可能性がある。本論文では,運動モデルを適応的に選択できる空間-時間畳込みネットワークを用いて画素ごとの動きを近似することを提案する。特に,線形と二次モデル間のソフトスイッチが可能である。この目的に向けて,各ピクセルの非線形運動モデルを推定するために,双方向光フローとオクルージョンマップ上のエンドツーエンド3D CNN符号器アーキテクチャを用いた。さらに,運動精密化モジュールを用いて,非線形運動を精密化し,補間フレームを,推定ピクセル運動による隣接フレームの簡単なワーピングにより推定した。一組の包括的な実験を通して,著者らのモデルの有効性を検証し,著者らの方法が4つのデータセット(Vimeo,DAVIS,HDおよびGoPro)に関して最先端のアルゴリズムより優れていることを示した。【JST・京大機械翻訳】

, , , , , , , , , , , , ,
, , 【Automatic Indexing@JST】

図形・画像処理一般

, , , ,

前のページに戻る