特許
J-GLOBAL ID：201803002770043881
単語自動翻訳に基づく唇形状変更装置および方法
発明者：
出願人/特許権者：
代理人 (3件)：
伊東 忠重
, 伊東 忠彦
, 大貫 進介
公報種別：特許公報
出願番号（国際出願番号）：特願2015-531005
特許番号：特許第6333260号
出願日： 2013年09月05日
請求項（抜粋）：
【請求項1】 話者の音声が異なる言語に翻訳されている間に、前記話者の唇形状を変更することにより、映像及び音声ベースの通信を提供するための装置であって、当該装置は、
命令とコンピュータ実行可能プログラムを備える少なくとも1つの非一時的デバイスとを使用して、プロセッサにより構成及び実行される少なくとも1つ以上のユニットであって、該少なくとも1つ以上のユニットは、
第1言語の複数の第1の単語と、前記複数の第1の単語の1つに対して対応するように第2言語に翻訳される複数の第2の単語とを格納するよう構成される単語データベースと、
前記第2言語に翻訳された前記複数の第2の単語の各々1つの単語の発音に対応する複数の唇形状に関連する映像データを格納するよう構成される映像データベースであって、前記映像データが前記複数の第2の単語の各々1つの単語の発音に対応する、予め制作された複数の唇形状を備える、映像データベースと、
カメラを使用して前記話者の顔を撮影し、前記カメラを介して撮影された映像から前記話者の顔領域を検出する領域検出部と、
前記話者の唇形状に対応する領域を決定し、前記検出された顔領域から前記領域を区分するように構成される領域区分部と、
マイクを介して前記話者の音声入力を受け、前記複数の第1の単語から単語を決定するように構成される単語検出部であって、前記単語は前記受け取った音声入力に対応して決定される、単語検出部と、
前記複数の第2の単語から単語を抽出するように構成される翻訳単語抽出部であって、該抽出された単語は、前記受け取った音声入力に対応する前記第2言語に翻訳され、前記抽出された単語は前記第2言語の単語である、翻訳単語抽出部と、
前記映像データの前記複数の唇形状から唇形状を決定及び抽出するように構成される映像データ抽出部であって、該抽出される唇形状は、前記第2の言語に翻訳された前記抽出された単語の発音に対応して格納されている唇形状の映像データである、映像データ抽出部と、
映像及び音声通信の間のタイムスタンプに基づく間隔で、前記区分された領域へ前記抽出された唇形状の映像データを挿入するように構成される映像挿入部と
を含んでなることを特徴とする、装置。
IPC (4件)：
G06T 1/00 ( 200 6.01)
, G06F 3/16 ( 200 6.01)
, G06T 13/80 ( 201 1.01)
, G10L 15/00 ( 201 3.01)
G06T 1/00 340 A
, G06F 3/16 650
, G06T 13/80 C
, G10L 15/00 200 C
