文献

J-GLOBAL ID：201702225742088324   整理番号：17A0456812

数学表現認識のための音声と手書きモダリティの結合【Powered by NICT】

Combining Speech and Handwriting Modalities for Mathematical Expression Recognition

著者 (4件)： Medjkoune Sofiane (Department of Automatic and Computer Science, Ecole des Mines de Douai, Douai, France) ,  Mouchere Harold (UBL, Universite de Nantes, IRCCyN UMR CNRS 6597, Nantes, France) ,  Petitrenaud Simon (UBL, Universite ́ du Maine, LIUM-EA 4023, Le Mans, France) ,  Viard-Gaudin Christian (UBL, Universite de Nantes, IRCCyN UMR CNRS 6597, Nantes, France)
資料名： IEEE Transactions on Human-Machine Systems  (IEEE Transactions on Human-Machine Systems)
巻： 47  号： 2  ページ： 259-272  発行年： 2017年 
JST資料番号： W1031A  ISSN： 2168-2291  CODEN： ITHSA6  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： アメリカ合衆国 (USA)  言語： 英語 (EN)

抄録/ポイント： 本論文では,オリジナルバイモーダルシステムを導入することにより,数学的表現認識のための新しい展望を開いた。手書き数式認識は多くのあいまいさへの傾向が非常に困難な課題であるので,書かれた形に固有の限界を回避するための補助的手段としての音声を用いた。教師がより良い解釈を可能にするために,数学的表現を音読書き方・読み方するユースケースのシナリオは,教室で与えられた講義に対応している。手書き文字と音声を認識するための最先端の解に加えて,モダリティの合併のための多層アーキテクチャを提案した。特に,Dempster-Shafer理論をシンボルレベルでの情報を処理するために使用されている。バイモーダルシステムは,実際の二峰性データ,HAMEXデータセット上で評価した。音声と手書きは単一手書きモダリティと比較した場合,結合した場合,大きな改善が観察された。Copyright 2017 The Institute of Electrical and Electronics Engineers, Inc. All Rights reserved. Translated from English into Japanese by JST【Powered by NICT】

シソーラス用語： *書法 ,  多層 ,  計算機アーキテクチャ ,  曖昧さ
準シソーラス用語： Dempster-Shafer理論 ,  ユースケース ,  *モダリティ ,  *手書き , 【Automatic Indexing@JST】

分類 (2件)： 図形・画像処理一般  (JE04010I) ,  パターン認識  (JE07000S)

タイトルに関連する用語 (5件)： 数学 ,  表現 ,  音声 ,  手書き ,  モダリティ