アーム-ハンド動的推定のための空間-時間並列変圧器【JST・京大機械翻訳】

Liu Shuying; Wu Wenbin; Wu Jiaxian; Lin Yue

プレプリント

J-GLOBAL ID：202202200851317175 整理番号：22P0322423

アーム-ハンド動的推定のための空間-時間並列変圧器【JST・京大機械翻訳】

Spatial-Temporal Parallel Transformer for Arm-Hand Dynamic Estimation

出版者サイト {{ this.onShowPLink() }} 複写サービスで全文入手
高度な検索・分析はJDreamⅢで

この文献はプレプリントです。プレプリントについてはこちらをご確認ください。

著者 (4件)： , , ,
資料名：
発行年： 2022年03月30日プレプリントサーバーでの情報更新日： 2022年03月30日
JST資料番号： O7000B 資料種別：プレプリント
記事区分：プレプリント発行国：アメリカ合衆国 (USA) 言語：英語 (EN)

腕と手の間の関係を利用して,単眼ビデオから腕と手の動力学を推定する手法を提案した。単眼完全ヒト運動捕獲技術は近年大きな進歩を遂げたが,インザイスビデオからの正確で妥当な腕のねじれと手のジェスチャーの回復は,まだ課題のままである。この問題を解決するため,アーム姿勢と手のジェスチャーが大部分の実際の状況において高度に相関するという事実に基づいて,著者らの解決策を提案した。フレーム間情報と同様に腕-手相関を完全に利用するために,アームと手の動力学を同時に予測するために,空間-一時的並列Arm-Hand運動変換器(PAHMT)を慎重に設計した。また,推定を滑らかで正確に奨励する新しい損失を導入した。さらに,手ジェスチャの200Kフレームを含むモーションキャプチャデータセットを収集し,このモデルを訓練するためにこのデータを使用した。2D手姿勢推定モデルと3D人間姿勢推定モデルを統合することによって,提案方法は単眼ビデオから妥当な腕と手動力学を作り出すことができる。広範な評価は,提案した方法が以前の最先端手法よりも利点を持ち,様々な挑戦的なシナリオの下でロバスト性を示すことを実証した。【JST・京大機械翻訳】

, , , , , , , , , , , ,
, , 【Automatic Indexing@JST】

図形・画像処理一般 , パターン認識

前のページに戻る