Pat
J-GLOBAL ID:200903093163480984

情報提示装置および情報提示方法

Inventor:
Applicant, Patent owner:
Gazette classification:公開公報
Application number (International application number):2002080253
Publication number (International publication number):2003281297
Application date: Mar. 22, 2002
Publication date: Oct. 03, 2003
Summary:
【要約】【課題】作業の状況に応じて作業手順を指示する映像を提示することで作業を支援するシステムを提供する。【解決部】動作認識処理と物体認識処理と状況推定処理を有することを特徴とする手順のプログラムを、動作計測部と映像情報入力部および情報提示部を有することを特徴とする情報提示装置に実行させることで、動作計測部が計測したユーザの動作情報と映像情報入力部が撮影した映像から認識されるユーザの作業対象からユーザの作業状況を推定して適切な情報を情報提示部に提示する。
Claim (excerpt):
ひとつまたは複数の作業対象への作業を支援する情報提示装置において、ユーザの動作を計測する動作計測部と、前記動作計測部からの計測データを用いてユーザの状態を認識する動作認識部と、ユーザが観察する作業対象の映像を入力する映像情報入力部と、前記作業対象を前記映像入力部からの入力映像を用いて認識する物体認識部と、前記物体認識部で使用する物体認識用データと前記物体認識部で認識した作業対象に関連する作業情報を取り込むインタフェース部と、前記動作認識部により認識されたユーザの動作状態と前記物体認識部により認識された作業対象により作業状況を推定する状況推定部と、推定された作業状況に基づき提示情報を決定して提示する作業情報提示部と、前記作業情報提示部からの出力を映像として表示する映像情報提示部とを有することを特徴とする情報提示装置。【請求項2】 前記動作計測部からの計測データと前記映像入力部からの作業対象を撮影した入力映像を用いて作業対象とユーザの観察位置の3次元的な位置関係を推定する3次元位置姿勢推定部と前記3次元位置姿勢推定部が推定した3次元位置姿勢情報を用いて3次元的な作業手順映像を合成する3次元作業映像合成部を有することを特徴とする請求項1に記載の情報提示装置。【請求項3】 ひとつまたは複数の作業対象への作業を支援する情報提示方法において、動作計測手段がユーザの動作を計測する手順と、動作認識手段が前記動作計測手段からの計測データを用いてユーザの状態を認識する手順と、映像情報入力手段がユーザが観察する作業対象の映像を入力する手順と、物体認識手段が前記作業対象を前記映像入力手段からの入力映像を用いて認識する手順と、インタフェース手段が前記作業対象認識手段で使用する作業対象認識用データと前記作業対象認識部で認識した作業対象に関連する作業情報を取り込む手順と、状況推定手段が前記動作認識手段により認識されたユーザの動作状態と前記物体認識手段により認識された作業対象により作業状況を推定する手順と、作業情報提示手段が推定された作業状況提示に基づき情報を決定して提示する手順と、映像情報提示手段が作業情報提示部からの出力を映像として表示する手順から構成されることを特徴とする情報提示方法。【請求項4】 3次元位置姿勢推定手段が前記動作計測手段からの計測データと前記映像入力手段からの作業対象を撮影した入力映像を用いて作業対象とユーザの観察位置の3次元的な位置関係を推定する手順と、3次元作業映像合成手段が前記3次元位置姿勢推定部が推定した3次元位置姿勢情報を用いて3次元的な作業手順映像を合成する手順から構成されることを特徴とする請求項3に記載の情報提示方法。
IPC (8):
G06F 17/60 138 ,  G01B 11/00 ,  G01P 13/00 ,  G06F 3/00 680 ,  G06F 17/30 170 ,  G06T 1/00 315 ,  G06T 7/20 300 ,  G06T 17/40
FI (8):
G06F 17/60 138 ,  G01B 11/00 H ,  G01P 13/00 A ,  G06F 3/00 680 C ,  G06F 17/30 170 D ,  G06T 1/00 315 ,  G06T 7/20 300 A ,  G06T 17/40 G
F-Term (42):
2F034AA19 ,  2F034BA03 ,  2F065AA04 ,  2F065AA14 ,  2F065AA17 ,  2F065AA20 ,  2F065AA31 ,  2F065AA51 ,  2F065BB05 ,  2F065CC16 ,  2F065FF04 ,  2F065FF65 ,  2F065JJ03 ,  2F065JJ26 ,  2F065QQ24 ,  2F065QQ28 ,  2F065QQ31 ,  2F065SS02 ,  2F065SS03 ,  5B050AA06 ,  5B050BA08 ,  5B050BA11 ,  5B050BA12 ,  5B050DA01 ,  5B050EA07 ,  5B050EA19 ,  5B050EA24 ,  5B050EA27 ,  5B050FA10 ,  5B057AA19 ,  5B057BA02 ,  5B057CA12 ,  5B057CB13 ,  5B057CE08 ,  5B057DA11 ,  5B057DB03 ,  5B057DC36 ,  5B075ND12 ,  5L096BA03 ,  5L096CA04 ,  5L096FA67 ,  5L096FA69
Patent cited by the Patent:
Cited by examiner (2)

Return to Previous Page