文献

J-GLOBAL ID：201502218273647118   整理番号：15A0863823

映像の盛り上がり箇所に音楽のサビを同期させるBGM付加支援手法

著者 (7件)： 佐藤晴紀 (早稲田大) ,  佐藤晴紀 (JST-CREST) ,  平井辰典 (早稲田大) ,  中野倫靖 (産業技術総合研) ,  後藤真孝 (産業技術総合研) ,  森島繁生 (早稲田大 理工学術院 総合研) ,  森島繁生 (JST-CREST)
資料名： 情報処理学会研究報告(Web)  (IPSJ Technical Report (Web))
巻： 2015  号： MUS-106  ページ： VOL.2015-MUS-106,NO.10 (WEB ONLY)  発行年： 2015年02月23日 
JST資料番号： U0451A  資料種別： 会議録 (C)
記事区分： 短報  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 本稿では,入力映像の指定箇所と入力楽曲の指定箇所を同期させながら,映像の全区間に対してBGMを付加する手法を提案する。従来研究では,既存動画から音響特徴量と映像特徴量を学習し,映像にBGMを自動付加する手法が提案されている。しかし,自動で映像にBGMを付加しているため,「映像の決定的なシーンに楽曲のサビを合わせたい」「映像の始端と終端に楽曲の始端と終端を合わせたい」といったユーザが指定した楽曲と映像の特定の箇所を同期するためのBGM付加については言及されていない。そこで本研究では,楽曲と映像の長さを揃えながら,ユーザが指定した楽曲と映像の箇所を同期させるように楽曲を断片的につなぎ合わせることで,映像の全区間に対してBGMを付加する。具体的には,動的計画法に基づく小節単位での楽曲の切り貼りによりユーザが指定した箇所を同期させたBGMの付加を実現する。被験者実験の結果,本手法は同じ音色の箇所が多いインストゥルメンタルの楽曲に対して特に有効であった。また,一度生成されたBGMをユーザが希望する楽曲の盛り上がりに合わせて再編集を行うことができるシステムを提案した。(著者抄録)

シソーラス用語： 情報科学 ,  *音楽 ,  *同期 ,  映像 ,  *コンテンツ ,  動的計画法 ,  人文科学
準シソーラス用語： 音楽情報科学 ,  *BGM ,  *作曲支援システム ,  *映像コンテンツ

分類 (3件)： その他の情報工学基礎理論  (JB06000C) ,  楽器音響  (BB03070Y) ,  通信網  (ND07030A)

引用文献 (13件)：

• 岩宮眞一郎:オーディオ・ビジュアル・メディアを通しての情報伝達における視覚と聴覚の相互作用に及ぼす音と映像の調和の影響,音響学会誌,Vol.48,No.9,pp.31-39(1992).
• Yoon, J. C., Lee, I. K. and Byun, S.:Automated music video generation using multi-level feature-based segmentation, Handbook of Multimedia for Digital Entertainment and Arts, pp.385-401 (2009).
• 小野佑大,石先広海,帆足啓一郎,小野智弘,甲藤二郎:音楽のムード分類結果を利用したホームビデオへの自動BGM付与・同期手法,情報科学フォーラム講演論文集,Vol.9,No.2,pp.295-296(2010).
• Jiashi, F., Bingbing, N. and Shuicheng, Y.:Autogeneration of professional background music for homemade videos, Proceedings of the 2nd International Conference on Internet Multimedia Computing and Service, pp.15-18 (2010).
• Chu, W. T., Tsai, and S.Y.:Rhythm of motion extraction and rhythm-based cross-media alignment for dance videos, IEEE Transactions on Multimedia, pp.129-141 (2012)

タイトルに関連する用語 (7件)： 映像 ,  箇所 ,  音楽 ,  サビ ,  BGM ,  支援 ,  手法