文献

J-GLOBAL ID：201402292615387633   整理番号：14A1399426

歌詞情報に基づくWeb画像検索を利用した歌詞連動スライドショー生成システム

Music Slideshow Generation Based on Web Image Retrieval with Queries Constructed from Lyrics

著者 (5件)： 石先広海 (KDDI研) ,  舟澤慎太郎 (早稲田大 理工学術院 基幹理工) ,  帆足啓一郎 (KDDI研) ,  小野智弘 (KDDI研) ,  甲藤二郎 (早稲田大 理工学術院 基幹理工)
資料名： 情報処理学会論文誌ジャーナル(Web)
巻： 54  号： 4  ページ： 1263-1274 (WEB ONLY)  発行年： 2013年04月15日 
JST資料番号： U0452A  ISSN： 1882-7764  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 本研究ではユーザが入力した楽曲に対して,楽曲の歌詞に基づいて検索したWeb画像と楽曲を同期させて再生するスライドショー生成システムについて提案する。楽曲歌詞の内容に適した画像を楽曲と同期させて再生することで,楽曲の情景表現を向上させ,より印象深い音楽体験の実現を目指す。具体的には,歌詞中の単語と,歌詞から推定した全体印象語から最適な画像検索クエリを抽出し,表示候補となる画像をWeb上から取得する。取得した画像に付与されているソーシャルタグと全体印象語の適合度を用いることで,歌詞の各行と連動して表示させる画像を選定する。さらに,歌詞の各行を表示する時間の最頻値を利用してスライドショー再生時の画像切替えを自動化する。最終的に,被験者評価実験により本システムの有効性を示す。(著者抄録)

シソーラス用語： *音楽 ,  文学 ,  *映写 ,  *画像処理システム ,  *画像検索 ,  画像 ,  Web【情報システム】 ,  *マルチメディア ,  応用プログラム ,  同期処理 ,  評価 ,  *画像再生 ,  画像合成 ,  画像評価 ,  実験 ,  *Web画像 ,  楽曲 ,  評価実験
準シソーラス用語： *スライドショー ,  マルチメディアアプリケーション ,  *印象評価 ,  *歌詞

分類 (2件)： 図形・画像処理一般  (JE04010I) ,  人間機械系  (IB03000G)

引用文献 (18件)：

• 岩宮眞一郎:オーディオ・ヴィジュアル・メディアによる音楽聴取行動における視覚と聴覚の相互作用,日本音響学会誌,Vol.48, pp.146-153(1992).
• Eerola, T., Lartillot, O. and Toiviainen, P.: Prediction of multidimensional emotional ratings in music from audio using multivariate regression models, Proc. ISMIR 2009, pp.621-626 (2009).
• Turnbull, D., Barrington, L., Torres, D. and Lanckriet, G.: Towards Musical Query-by-Semantic-Description using the CAL500 Data Set, Proc. 30th Annual International ACM SIGIR Conference on Research and Development in Information Retrieval, pp.439-446 (2007).
• Bertin-Mahieux, T., Eck, D.; Maillet, F. and Lamere, P.: Autotagger: A model for Predicting social tags from acoustic features on large music databases, Journal of New Music Research, special issue: From genres to tags: Music Information Retrieval in the era of folksonomies, Vol.37, No.2 pp.151-165 (2008).
• Terada, T., Tsukamoto, M. and Nishino, S.: A System for Presenting Background Scenes of Karaoke Using an Active Database System, Proc. ISCA 18th International Conference on Computers and Their Applications, pp.160-165 (2003).

タイトルに関連する用語 (6件)： 歌詞 ,  Web画像 ,  検索 ,  連動 ,  スライドショー ,  生成システム