文献

J-GLOBAL ID：202202260493525052   整理番号：22A0841054

知識蒸留と移動学習の組合せに基づくマルチモーダル音楽感情認識法【JST・京大機械翻訳】

Multimodal Music Emotion Recognition Method Based on the Combination of Knowledge Distillation and Transfer Learning

著者 (1件)： Tong Guiying (College of Music, Huizhou University, Huizhou 516000, Guangdong, China)
資料名： Scientific Programming  (Scientific Programming)
巻： 2022  ページ： Null  発行年： 2022年 
JST資料番号： W0689A  ISSN： 1058-9244  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： イギリス (GBR)  言語： 英語 (EN)

抄録/ポイント： 音楽感情認識の主な困難は,十分なラベル付きデータの欠如である。不均衡カテゴリーによるラベル付きデータだけを用いて,感情認識モデルを訓練した。感情カテゴリーの高精度なラベリングだけでなく,時間のかかるが,同時に,ラベル付け者のための広範囲な音楽的背景を必要とし,音楽の感情は,多くの因子によってしばしば影響を受ける。Singing法,音楽スタイル,配置法,リリック,および他の因子は音楽感情の発現に影響を及ぼす。本論文では,知識蒸留と音楽スタイル転送学習の組合せに基づくマルチモーダル方法を提案し,20,000の歌に対する方法の有効性を検証した。実験は,単一オーディオ,単一リリック,および単一オーディオのような伝統的方法と比較して,この論文で提案する方法は,感情認識の精度を著しく改善し,一般化能力を著しく改善することを示した。Copyright 2022 Guiying Tong. Translated from English into Japanese by JST.【JST・京大機械翻訳】

シソーラス用語： *音楽 ,  *学習 ,  感情 ,  *蒸留 ,  精度 ,  *認識 ,  オーディオ機器 ,  *多モード ,  有効性
準シソーラス用語： 不均衡 ,  *感情認識 ,  高精度 ,  歌 , 【Automatic Indexing@JST】

分類 (2件)： 楽器音響  (BB03070Y) ,  応用心理学  (AE02000A)

引用文献 (38件)：

• M. Doyran, A. Schimmel, P. Baki, K. Ergin, B. Türkmen, A. A. Salah, S. C. J. Bakkes, H. Kaya, R. Poppe, A. A. Salah, "Mumbai: multi-person, multimodal board game affect and interaction analysis dataset," Journal on Multimodal User Interfaces, vol. 15, no. 4, pp. 373-391, 2021.
• M. C. Camacho, E. M. Williams, K. Ding, S. B. Perlman, "Multimodal examination of emotion processing systems associated with negative affectivity across early childhood," Developmental Cognitive Neuroscience, vol. 48, no. 1, pp. 915-917, 2021.
• D. Liu, L. Chen, Z. Wang, G. Diao, "Speech expression multimodal emotion recognition based on deep belief network," Journal of Grid Computing, vol. 19, no. 2, pp. 59-72, 2021.
• T. Chen, H. Yin, X. Yuan, Y. Gu, F. Ren, X. Sun, "Emotion recognition based on fusion of long short-term memory networks and SVMs," Digital Signal Processing, vol. 117, no. 1, pp. 137-153, 2021.
• D. S. Cortes, C. Tornberg, T. Bnziger, H. A. Elfenbein, H. Fischer, P. Laukka, "Effects of aging on emotion recognition from dynamic multimodal expressions and vocalizations," Scientific Reports, vol. 11, no. 1, 2021.

タイトルに関連する用語 (6件)： 知識蒸留 ,  学習 ,  組合せ ,  マルチモーダル ,  音楽 ,  感情認識