文献

J-GLOBAL ID：202202242407203018   整理番号：22A1072368

複数のセンサを用いる無発声単語認識に関する研究

A study on silent word recognition using various sensors

著者 (2件)： 草本雅也 (日本工大) ,  大田健紘 (日本工大)
資料名： 電子情報通信学会技術研究報告(Web)  (IEICE Technical Report (Web))
巻： 121  号： 404(MICT2021 101-111)  ページ： 19-24 (WEB ONLY)  発行年： 2022年02月25日 
JST資料番号： U2030A  ISSN： 2432-6380  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 本研究は,複数のセンサを用いた無発声単語認識の有効性を明らかにすることを目的とする.無発声音声認識の一つの手段として可視光カメラを用いた場合,口形の変化が類似している単語については識別が困難となる課題がある.そのため,可視光カメラ及びサーモグラフィー,筋電位センサを用いて,発話動作から口の動きや口内の情報に関する時系列データを取得し,それらを融合する深層学習を行った.その結果,サーモグラフィーにより得られた熱動画像を学習データに含むことが認識性能の向上に寄与した.特に熱動画像と筋電位を融合することで最良の認識性能が得られた.(著者抄録)

シソーラス用語： 認識 ,  *言語理解 ,  機械学習 ,  サーモグラフィー ,  活動電位 ,  マンマシンインタフェイス ,  *ニューラルネットワーク
準シソーラス用語： *CNN ,  *LSTM ,  筋電位 ,  深層学習 ,  単語認識 ,  *読唇

分類 (1件)： パターン認識  (JE07000S)

引用文献 (5件)：

• 宮崎 剛,中島 豊四郎,”口形ベースの機械読唇における単語認識手法の提案と評価”マルチメディア,分散,協調とモバイル(DICOMO2014)シンポジウム , pp.896-902,July 2014.
• 福本 尚生,野口 祐介,相知 政司,古川 達也, “ 表 面筋電位 信 号 による無発声母音認識システムにおける自己組織化マップを用いたパターン解析”電学論 C,129巻 10号,pp.1785-1791, 2009.
• 森川 詩音, 福見 稔, 伊藤 桃代, 伊藤 伸一,”乾式電極を用いた口唇 EMG による個人認証,” 電気学会電子・情報・システム部門大会論文集, pp.1571-1572,Sep. 2018.
• Richard Drake,A.Wayne Vogl,Adam W.M.Michell, 塩田 浩平,秋田 恵一,”グレイ解剖学”,エルゼビアジャパン株式会社,出版 2016年2月26日,pp.751.
• C. Sagonas, E. Antonakos, G, Tzimiropoulos, S. Zafeiriou, M. Pantic. “ 300 faces In-the-wild challenge: Database and results”Image and Vision Computing (IMAVIS), Vol. 47, pp. 3-18, 2016.

タイトルに関連する用語 (3件)： 発声 ,  単語認識 ,  研究