文献

J-GLOBAL ID：201502220427377708   整理番号：15A0386398

混合音中の歌声F0軌跡に対する歌唱表現転写システム

著者 (4件)： 池宮由楽 (京大 大学院情報学研究科) ,  糸山克寿 (京大 大学院情報学研究科) ,  吉井和佳 (京大 大学院情報学研究科) ,  奥乃博 (早稲田大 大学院創造理工学研究科)
資料名： 情報処理学会研究報告(Web)  (IPSJ Technical Report (Web))
巻： 2014  号： MUS-104  ページ： VOL.2014-MUS-104,NO.23 (WEB ONLY)  発行年： 2014年08月18日 
JST資料番号： U0451A  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 本稿では,音楽音響信号に含まれる歌声の基本周波数(F0)軌跡に対して歌唱表現(ビブラート・グリッサンド・こぶし)を転写することを可能とするシステムを提案する。能動的音楽鑑賞インタフェースは,エンドユーザのインタラクティブな音楽鑑賞を実現することを目的とした研究アプローチである。これには既存楽曲の加工支援も含まれ,歌声に関連するものでは,声質変換や歌声分離などの研究がなされている。本研究では,歌唱の歌い回しの加工を扱い,特に混合音中の歌声のF0軌跡を任意に編集するインタフェースを実現する。ユーザは,歌声の任意の箇所を指定し,好みの歌唱表現を転写することで,歌い回しを自由に加工することができる。また,事前に市販楽曲からプロ歌手の歌唱表現を蓄積したデータベースを作成し,ユーザはそのデータベースから歌唱表現を参照することで直感的に転写を行うことが可能となる。歌唱表現の転写は,対数周波数軸において選択的に歌声のスペクトルのみをシフトさせ,伴奏音への影響を抑圧しながら歌声の音高を操作することで行われる。このとき,音韻性を保持するためスペクトル包絡を用いて音色の補正を行う。実際にユーザが表現の転写箇所を指定したり,F0の存在範囲を提示するため,Graphical User Interface(GUI)の作成を行っている。実験では,音色補正の有効性やユーザ入力を用いたF0推定の頑健性などを確認した。(著者抄録)

シソーラス用語： *信号解析 ,  *音波信号 ,  音響 ,  音環境 ,  発声 ,  音響特性 ,  音声合成 ,  音声分析 ,  特徴抽出 ,  音楽 ,  音声 ,  転写 ,  基本振動数 ,  ユーザインタフェイス ,  ヒューマンインタフェイス ,  音声処理 ,  信号変換 ,  ヒューマンコンピュータインタラクション ,  *音響信号解析 ,  歌声 ,  混合音 ,  歌 ,  音声変換
準シソーラス用語： ビブラート ,  歌唱 ,  基本周波数 ,  声質変換

分類 (2件)： 音響信号処理  (BB03050C) ,  音声処理  (JE05000E)

引用文献 (20件)：

• Goto, M.: Active Music Listening Interfaces Based on Signal Processing, Proc. ICASSP (2007).
• Yoshii, K., Goto, M., Komatani, K., Ogata, T. and Okuno, H. G.: Drumix: An Audio Player with Real-time Drum-part Rearrangement Functions for Active Music Listening, IPSJ Journal (2007).
• Itoyama, K., Goto, M., Komatani, K., Ogata, T. and Okuno, H. G.: Instrument Equalizer for Query-by-Example Retrieval: Improving Sound Source Separation based on Integrated Harmonic and Inharmonic Models, Proc. ISMIR (2008).
• Fritsch, J. and Plumbley, M. D.: Score Informed Audio Source Separation using Constrained Nonnegative Matrix Factorization and Score Synthesis, Proc. ICASSP (2013).
• Rafii, Z., Germain, F. G., Sun, D. L. and Mysore, G. J.: Combining Modeling of Singing Voice and Background Music for Automatic Separation of Musical Mixtures, Proc. ISMIR (2013).

タイトルに関連する用語 (7件)： 混合音 ,  歌声 ,  f0 ,  軌跡 ,  歌唱 ,  表現 ,  転写システム