動画像合成装置および方法並びにプログラム

Inventor： ,
Applicant, Patent owner：
Agent (2)：柳田征史 , 佐久間剛
Gazette classification：公開公報
Application number (International application number)：2003407320
Publication number (International publication number)：2004236291
Application date： Dec. 05, 2003
Publication date： Aug. 19, 2004
Summary：

【課題】動画像データからサンプリングされた複数のフレームから1の高解像度フレームを得るに際し、フレームに含まれる被写体の動きに拘わらず画質の劣化を抑えた高解像度フレームを得る。【解決手段】複数のフレームFrN,FrN+1に1以上の矩形領域に分割されたパッチを配置し、パッチを移動および/または変形させて各フレームの対応関係を推定し、推定された対応関係に基づいてフレームFrN+1を座標変換し、これとフレームFrNとの相関値を算出する。パッチの分割数を1段階贈介して同様に相関値を算出する。2つの相関値の変化量を算出してこれをしきい値と比較し、変化量がしきい値以下となるまで分割数を増加して同様に変化量を算出する。しきい値以下となった変化量を算出した2つの相関値の分割数のうち、小さい方の分割数により推定された対応関係に基づいて、フレームFrN,FrN+1から合成フレームFrGを作成する。【選択図】図1

Claim (excerpt)：

動画像から連続する2つのフレームをサンプリングするサンプリング手段と、該2つのフレームのうち、基準となる1の基準フレーム上に1または複数の矩形領域を有する基準パッチを配置し、該基準パッチと同様のパッチを該基準フレーム以外の他のフレーム上に配置し、該パッチ内の画像が前記基準パッチ内の画像と一致するように、該パッチを前記他のフレーム上において移動および/または変形し、該移動および/または変形後のパッチおよび前記基準パッチに基づいて、前記他のフレーム上の前記パッチ内の画素と前記基準フレーム上の前記基準パッチ内の画素との対応関係を推定する対応関係推定手段と、前記対応関係に基づいて、前記他のフレームの前記パッチ内の画像を前記基準フレームの座標空間に座標変換して座標変換済みフレームを取得する座標変換手段と、該座標変換済みフレームと前記基準フレームの前記基準パッチ内の画像との相関を表す相関値を算出する相関値算出手段と、前記基準パッチおよび前記パッチ内の前記矩形領域の分割数を1段階増加して、前記対応関係の推定、前記座標変換済みフレームの取得および前記相関値の算出を行うよう、前記対応関係推定手段、前記座標変換手段および前記相関値算出手段を制御する制御手段と、前記2つの相関値の変化量を算出する変化量算出手段と、該変化量が所定のしきい値以下となるまで、前記基準パッチおよび前記パッチ内の前記矩形領域の分割数を段階的に増加して、各段階において前記対応関係の推定、前記座標変換済みフレームの取得、前記相関値の算出および隣接する段階の分割数により算出された2つの相関値の変化量の算出を行うよう、前記対応関係推定手段、前記座標変換手段、前記相関値算出手段および前記変化量算出手段を制御する比較手段と、前記変化量が前記所定のしきい値以下となったときの前記2つの相関値のうち、いずれかの相関値を算出した分割数において推定された前記対応関係に基づいて、前記他のフレームの前記パッチ内の画像および前記基準フレームの前記基準パッチ内の画像に対して補間演算を施して、前記各フレームよりも解像度が高い合成フレームを作成する合成手段とを備えたことを特徴とする動画像合成装置。

IPC (4)：

H04N5/92 , G06T3/00 , G06T7/20 , H04N1/387

FI (5)：

H04N5/92 H , G06T3/00 300 , G06T7/20 C , H04N1/387 , H04N1/387 101

F-Term (35)：

5B057CA01 , 5B057CA08 , 5B057CA12 , 5B057CA16 , 5B057CB01 , 5B057CB08 , 5B057CB12 , 5B057CB16 , 5B057CD02 , 5B057CD03 , 5B057CD05 , 5B057CD11 , 5B057CE08 , 5B057DA07 , 5B057DB02 , 5B057DB06 , 5B057DB09 , 5B057DC32 , 5B057DC34 , 5C053FA17 , 5C053KA01 , 5C053KA24 , 5C053LA11 , 5C076AA17 , 5C076AA21 , 5C076AA23 , 5C076BA06 , 5C076BB04 , 5L096CA04 , 5L096DA01 , 5L096EA33 , 5L096FA25 , 5L096FA34 , 5L096GA17 , 5L096HA04

Patent cited by the Patent：

Cited by applicant (1)

画像処理装置、方法及びコンピュータ読み取り可能な記憶媒体
Gazette classification：公開公報 Application number：特願平11-165941 Applicant：キヤノン株式会社

Return to Previous Page