Pat

J-GLOBAL ID：200903021729339892

自由視点動画像データ生成方法およびその処理をコンピュータに実行させるためのプログラム

Inventor： 斎藤 英雄 ,  稲本 奈穂 ,  岩瀬 幸子
Applicant, Patent owner： 学校法人慶應義塾
Agent (5)： 役 昌明 ,  大橋 公治 ,  平野 雅典 ,  林 紘樹 ,  杉山 猛
Gazette classification：公開公報
Application number (International application number)：2003036577
Publication number (International publication number)：2004246667
Application date： Feb. 14, 2003
Publication date： Sep. 02, 2004
Summary：

【課題】静止状態の被写体および移動状態の被写体の双方の中間視点における画像データを受信側で生成する。【解決手段】受信側装置のユーザは、鑑賞したい画像の時間情報および視点位置を入力装置21を用いて入力する。CPU23は、それらの情報を通信装置26経由で送信側装置へ送信する。送信側装置のCPU14は、受信した時間情報が示す時刻に2つのカメラで撮像された画像の移動領域の動画像データ、その動画像データの構造的特徴情報、および2つのカメラ間の動画像データの対応関係情報を通信装置17経由で受信側装置へ送信する。受信側装置では、受信した動画像データおよび各種情報を用いて、フレーム毎に順次移動領域の中間視点画像データを生成し、予め受信しておいた近景の静止領域の中間視点における画像データ、および遠景の静止領域の中間視点における画像データと合成し、モニタ22にて表示する。【選択図】 図1

Claim (excerpt)：

送信側で3次元空間内の被写体を複数の異なる視点から撮像して動画像データを取得し、受信側で隣接視点の間の任意の中間視点における前記被写体の動画像データを生成する自由視点動画像データ生成方法であって、 前記被写体を複数の異なる視点から撮像して取得した動画像データを移動領域と静止領域とに分割するステップと、全ての隣接視点間の射影幾何情報を推定するステップと、前記静止領域の画像データについて、前記射影幾何情報を基に全ての前記中間視点における自由視点静止画像データを生成するステップと、前記移動領域の動画像データについて、前記射影幾何情報を基に該動画像データの構造的特徴情報、および全ての前記隣接視点間の動画像データの対応関係情報を生成するステップと、全ての前記中間視点における自由視点静止画像データおよび全ての前記射影幾何情報を前記受信側へ予め送信するステップとを前記送信側で実行し、 全ての前記中間視点における自由視点静止画像データおよび全ての前記射影幾何情報を予め受信して保存するステップと、前記隣接視点の間の任意の中間視点を選択し、前記送信側へ通知するステップを前記受信側で実行し、 前記受信側から通知された中間視点に対応する隣接視点における移動領域の動画像データ、該動画像データの構造的特徴情報、および前記隣接視点間の動画像データの対応関係情報を前記受信側へ送信するステップを前記送信側で実行し、 前記移動領域の動画像データ、該動画像データの構造的特徴情報、および前記隣接視点間の動画像データの対応関係情報を受信し、前記任意の中間視点における前記移動領域の動画像データを生成するステップと、前記予め保存された任意の中間視点における自由視点静止画像データを読み出し、前記生成された任意の中間視点における移動領域の動画像データと合成して、前記任意の中間視点における動画像データを生成するステップとを前記受信側で実行する ことを特徴とする自由視点動画像データ生成方法。

IPC (3)：

G06T17/40 ,  G06T1/00 ,  H04N7/18

FI (3)：

G06T17/40 E ,  G06T1/00 315 ,  H04N7/18 K

F-Term (42)：

5B050AA08 ,  5B050BA09 ,  5B050BA11 ,  5B050CA08 ,  5B050DA02 ,  5B050DA04 ,  5B050DA10 ,  5B050EA03 ,  5B050EA07 ,  5B050EA12 ,  5B050EA13 ,  5B050EA19 ,  5B050EA22 ,  5B050EA24 ,  5B050EA27 ,  5B050FA02 ,  5B050FA05 ,  5B057CA01 ,  5B057CA08 ,  5B057CA13 ,  5B057CA16 ,  5B057CB01 ,  5B057CB08 ,  5B057CB12 ,  5B057CB16 ,  5B057CD20 ,  5B057DA07 ,  5B057DA08 ,  5B057DA12 ,  5B057DA17 ,  5B057DB03 ,  5B057DB06 ,  5B057DB09 ,  5B057DC32 ,  5C054AA05 ,  5C054DA01 ,  5C054DA07 ,  5C054DA08 ,  5C054EA05 ,  5C054FD03 ,  5C054GA01 ,  5C054GB06