特許
J-GLOBAL ID：200903004144015763
マルチモーダル入力解析システム
発明者：
出願人/特許権者：
代理人 (1件)：
岩佐 義幸
公報種別：公開公報
出願番号（国際出願番号）：特願平5-256199
公開番号（公開出願番号）：特開平7-110734
出願日： 1993年10月14日
公開日（公表日）： 1995年04月25日
要約：
【要約】【目的】 対象物を毎回ポインティングする必要がなく、また音声入力を強制せず自由に入力手段を選択できるマルチモーダル入力解析システムを提供する。【構成】 ポインティング入力手段1と、音声入力手段2と、各オブジェクトの位置や特徴情報を格納しておくオブジェクト情報格納部3と、操作対象となっているオブジェクトの情報を格納しておく操作対象保持部4と、ポインティング入力に対応して行なうべき処理を記述したポインティングイベントテーブル5と、音声入力のパターンに対応して行うべき処理を記述した音声イベントテーブル6と、入力履歴を保存しておく履歴保持部7と、ポインティング入力手段および音声入力手段からの入力データを統合して解釈し処理を決定する統合解釈部8と、決定された処理を実行する処理実行部9とを備えている。
請求項（抜粋）：
操作対象となる各オブジェクトの位置や特徴情報を格納するオブジェクト情報格納部と、現在の操作対象オブジェクトの情報を格納する操作対象保持部と、入力履歴を格納しておく履歴保持部と、ポインティング入力に応じて行なうべき処理を記述したポインティングイベントテーブルと、音声入力のパターンに応じて行なうべき処理を記述した音声イベントテーブルと、ポインティング入力手段および音声入力手段から入力データを受け取り、入力データに応じて処理を振り分ける入力判定部と、前記入力判定部からポインティング入力データのみを受け取って、前記ポインティングイベントテーブルを参照して、実行する処理を決定するポインティングイベント単独処理部と、前記入力判定部から音声入力データとポインティング入力データのリストを受け取り、音声入力データ中の指示表現の数とポインティング入力データの数を比較し、ポインティング入力データの方が少なければ、不足しているポインティング情報を獲得し、前記ポインティング入力データリストに追加するポインティング情報獲得部と、このポインティング入力データリストおよび音声入力データを受け取って、音声入力データ中の意味表現とポインティング入力データリスト中のポインティングデータを出現順に比較して、意味表現に合致していればその意味表現をポインティングデータで置き換える同定処理部と、同定処理後の意味表現を受け取り、音声イベントテーブルを参照して実行する処理を決定する処理決定部と、決定された処理を実行してその結果を前記オブジェクト格納部および操作対象保持部に反映させる処理実行部と、を備えたことを特徴とするマルチモーダル入力解析システム。
IPC (5件)：
G06F 3/033
, G06F 3/03 380
, G06F 3/16 320
, G06T 1/00
, G10L 3/00 531
