文献

J-GLOBAL ID：202202236427604868   整理番号：22A1172365

テキストによる画像操作のための対D++GAN【JST・京大機械翻訳】

Paired-D++ GAN for image manipulation with text

著者 (3件)： Vo Duc Minh (Department of Informatics, SOKENDAI (The Graduate University for Advanced Studies), Tokyo, Japan) ,  Vo Duc Minh (The University of Tokyo, Tokyo, Japan) ,  Sugimoto Akihiro (National Institute of Informatics, Tokyo, Japan)
資料名： Machine Vision and Applications  (Machine Vision and Applications)
巻： 33  号： 3  ページ： 45  発行年： 2022年 
JST資料番号： T0616A  ISSN： 0932-8092  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： ドイツ (DEU)  言語： 英語 (EN)

抄録/ポイント： テキストによる画像操作は,背景のような画像における他の無関係な情報を保持しながら,新しい視覚属性を記述する与えられたテキストに基づくソース画像におけるオブジェクトの外観を意味的に修正することである。これは,インテリジェント画像操作のような広範囲の応用を持ち,絵画で良くないものに役立つ。ここでは,異なるアーキテクチャ,すなわち,2つの識別子が異なる判断を行うテキストによる画像操作のための,Paired-D++GAN,すなわち,2つの識別子が前景合成の1つ,および背景合成のもう1つ,の画像操作のために,対D++GANのペアを持つ,生成敵対ネットワークを提案する。”Paired-D++GAN”を,2つの識別器が,異なる判断を行うテキストによる画像操作のために,提案した。Paired-D++GANの発生器は,スキップ接続を有する符号器デコーダアーキテクチャを持ち,ソース画像の他の部分を保存する間,与えられたテキスト記述をマッチングするオブジェクトの外観を合成する。2つの識別器は,与えられた入力テキスト記述と与えられたソース画像を満たすために,別々に合成画像の前景と背景を判断する。Paired-D++GANを,同時3層ミニマックスゲームにおける効果的無条件および条件付き敵対学習プロセスを用いて訓練した。Caltech-200鳥データセットとOxford-102花データセットに関する著者らの包括的実験結果は,Paired-D++GANが,最先端の方法に対するソース画像におけるバックグラウンドを保持しながら,入力テキスト記述に整合する画像を意味的に合成できることを示した。Copyright The Author(s), under exclusive licence to Springer-Verlag GmbH Germany, part of Springer Nature 2022 Translated from English into Japanese by JST.【JST・京大機械翻訳】

シソーラス用語： 視覚 ,  弁別器 ,  ネットワーク ,  操作 ,  符号器 ,  *計算機アーキテクチャ
準シソーラス用語： 学習過程 ,  前景 ,  識別子 , 【Automatic Indexing@JST】

著者キーワード (5件)： 画像操作 ,  テキストによる画像操作 ,  生成敵対ネットワーク ,  画像合成 ,  対弁別器

分類 (2件)： 図形・画像処理一般  (JE04010I) ,  パターン認識  (JE07000S)