文献

J-GLOBAL ID：201202251803238367   整理番号：12A1398968

空間写像に基づく母音と鼻子音を対象としたジェスチャ-音声変換システム

A Speech-to-Hand Conversion System for Vowels and Nasals Based on Space Mapping

著者 (5件)： 國越晶 (東大) ,  QIAO Yu (中国科学院 深セン先進技術研究院) ,  齋藤大輔 (東大) ,  峯松信明 (東大) ,  広瀬啓吉 (東大)
資料名： 情報処理学会論文誌ジャーナル(CD-ROM)  (情報処理学会論文誌 論文誌ジャーナル(CD-ROM))
巻： 53  号： 9  ページ： 2291-2301  発行年： 2012年09月15日 
JST資料番号： Z0778B  ISSN： 1882-7837  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 調音音声合成に代表される文字や記号を介さない合成方式は,運動の連続性に基づく滑らかな合成音の生成やその話速制御などにおいて有効性が注目されている。しかしそのアプリケーションのほとんどは,入力機器の特性を活用して設計されているため,その方法論を他のメディアや機器に応用することは容易ではない。本研究では身体運動から音声を生成するプロセスを,特定の身体部位に限定せずに一般化してとらえ,音声以外のメディア情報の動きを入力として音声を出力するプロセス,異メディア間写像の問題としてとらえる。そして近年声質変換の分野で広く用いられている統計的空間写像構築法を応用した,メディア非依存の方法論を提案する。本稿ではその一例として手の運動からの音声出力を考える。この手法においては,どの手の姿勢(以下ジェスチャ)をどの音に割り当てるかが課題となる。これまでに,ジェスチャを入力とした日本語5母音の連続音声生成において,本手法の有効性および適切なジェスチャ選択手法を報告している。本稿では,子音として鼻子音に注目し,母音に関して,ジェスチャと音が時間同期されたデータを用いて構築した音声→ジェスチャ変換システム(目的とするシステムの逆システム)に鼻子音音声を入力することにより,鼻子音に割り当てるジェスチャを推定する手法を提案する。聴取実験の結果,音声→ジェスチャ変換システムによって推定されたジェスチャは,ジェスチャ候補から選ばれた準最適なジェスチャと比較して,より自然な音声を出力するジェスチャ→音声システムを構築することが示された。(著者抄録)

シソーラス用語： *音声合成 ,  調音 ,  情報メディア ,  入出力 ,  変換 ,  性質 ,  音声処理 ,  *信号変換 ,  *統計的方法 ,  挙動 ,  割当問題 ,  母音 ,  日本語
準シソーラス用語： ジェスチャー ,  ジェスチャ-音声変換 ,  メディア変換 ,  声質 ,  声質変換 ,  *調音音声合成

分類 (3件)： 音声処理  (JE05000E) ,  信号理論  (ND02020G) ,  システム・制御理論一般  (IA02010H)

引用文献 (29件)：

• [1] 緒方公一,山下健太郎,掛谷拓史,広瀬 賢,中島邦久:声道形状マッピングインタフェースのコンバータとしての応用,日本音響学会春季講演論文集,2-7-3,pp.283-286(2011).
• [2] d'Alessandro, N. and Dutoi, T.: Handsketch: Bi-manual control of voice quality dimensions and longterm practice issue, QPSR of the Numediart Research Program, Vol.2, No.2 (2009).
• [3] Nordstrom, K., Fels, S., Hassall, C.D. and Pritchard, B.: Developing vowel mappings for an interactive voice synthesis system controlled by hand motions, Journal of Acoustic Society of America, Vol.127, No.3, p.2021 (2010).
• [4] 荒井隆行:声道形状を単純化した模型による音声の音響教育,電子情報通信学会技術研究報告,Vol.109,No.10,pp.7-12(2009).
• [5] 坂田 聡,佐伯勇哉,柴田 航,上田裕市:母音発声のリアルタイム視聴覚フィードバックのための正規化構音空間の検討とその応用,電子情報通信学会技術研究報告,Vol.11,No.225,pp.55-60(2011).

タイトルに関連する用語 (4件)： 写像 ,  母音 ,  ジェスチャ ,  音声変換