文献

J-GLOBAL ID：202202289564875037   整理番号：22A0482588

クロスモーダルニューラルアーキテクチャ探索によるビデオモーメント検索【JST・京大機械翻訳】

Video Moment Retrieval With Cross-Modal Neural Architecture Search

著者 (6件)： Yang Xun (Department of Electronic Engineering and Information Science, School of Information Science and Technology, University of Science and Technology of China, Hefei, China) ,  Wang Shanshan (Institute of Physical Science and Information Technology, Anhui University, Hefei, China) ,  Dong Jian (Qihoo 360, Beijing, China) ,  Dong Jianfeng (College of Computer and Information Engineering, Zhejiang Gongshang University, Hangzhou, China) ,  Wang Meng (School of Computer Science and Information Engineering, Hefei University of Technology, Hefei, China) ,  Chua Tat-Seng (Sea-NExT Joint Lab, Singapore)
資料名： IEEE Transactions on Image Processing  (IEEE Transactions on Image Processing)
巻： 31  ページ： 1204-1216  発行年： 2022年 
JST資料番号： W0364A  ISSN： 1057-7149  CODEN： IIPRE4  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： アメリカ合衆国 (USA)  言語： 英語 (EN)

抄録/ポイント： ビデオモーメント検索(VMR)のタスクは,テキストクエリに従って,非トリミングビデオから特定のビデオモーメントを検索することである。複雑なクロスモーダルマッチング関係の効果的なモデリングを必要とする挑戦的なタスクである。最近の努力は,主に手作業ネットワークアーキテクチャによるクロスモーダル相互作用をモデル化する。それらの有効性にもかかわらず,それらはアーキテクチャを選択するための専門家の経験に大きく依存し,注意深く調整する必要がある多数のハイパーパラメータを持ち,実世界シナリオにおけるそれらの応用を著しく制限する。より少ない手動努力とのクロスモーダル相互作用をモデル化するための柔軟なアーキテクチャを設計する方法は,VMRのタスクにとって極めて重要であるが,今までに限られた注目を受けてきた。この問題に取り組むために,クロスモーダルマッチング関係を学習するための最適アーキテクチャを自動的に探索する新しいVMR手法を提案した。具体的には,クロスモーダルアーキテクチャ探索法を開発した。それは,カスタム化タスク特異的操作集合上で操作サンプリングを実行する有向非巡回グラフに基づく反復可能セルネットワークアーキテクチャを最初に探索する。次に,検索されたセルにおいてソフトにエッジサンプリングを行うクエリー意識注意ネットワークによってグラフにおけるエッジ重要度を適応的に調節した。既存のニューラルアーキテクチャ探索法とは異なり,提案アプローチは,交差モードマッチングのモデリングのためのクエリ条件アーキテクチャに到達するためのクエリ情報を効果的に活用できる。3つのベンチマークデータセットに関する大規模な実験は,著者らのアプローチが最先端の方法を著しく凌駕するだけでなく,手作業の工芸ネットワークアーキテクチャよりも,より効率的かつロバストに実行できることを示した。Copyright 2022 The Institute of Electrical and Electronics Engineers, Inc. All rights reserved. Translated from English into Japanese by JST.【JST・京大機械翻訳】

シソーラス用語： 相互作用 ,  ネットワーク ,  *録画装置 ,  *モーメント ,  有効性 ,  ベンチマーク ,  *計算機アーキテクチャ ,  ロバスト性 ,  ネットワークアーキテクチャ ,  カスタム化
準シソーラス用語： DAG【グラフ】 ,  クエリー ,  ハイパーパラメータ , 【Automatic Indexing@JST】

分類 (1件)： 図形・画像処理一般  (JE04010I)

タイトルに関連する用語 (4件)： 探索 ,  ビデオ ,  モーメント ,  検索