文献

J-GLOBAL ID：201902246023186400   整理番号：19A0413751

顔画像からの感情抽出とその数値化・可視化-音楽鑑賞・落語鑑賞における評価実験-

Emotion Extraction from Face Images and its Quantification/Visualization-Experimental Evaluation in Music Concerts and Rakugo Performance-

著者 (4件)： 藤堂聖真 ,  辻岡哲夫 ,  岡崎和伸 (大阪市大 都市健康・スポーツ研究セ) ,  小田中章浩 (大阪市大 大学院文学研究科)
資料名： 電子情報通信学会技術研究報告  (IEICE Technical Report (Institute of Electronics, Information and Communication Engineers))
巻： 118  号： 275(CS2018 56-67)(Web)  ページ： 43-49 (WEB ONLY)  発行年： 2018年10月25日 
JST資料番号： S0532B  ISSN： 0913-5685  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： 近年,機械学習,とりわけ深層学習の分野の研究が活発である。その応用例の一つとして,顔画像からの感情抽出が注目されている。本研究では,深層学習の芸術への応用を目的として,音楽鑑賞・落語鑑賞における観客の顔画像から感情を抽出することを試みる。実際に,28人及び30人の被験者による評価実験を実施し,西洋クラシック音楽,ガムラン音楽,即興音楽,落語を鑑賞中の被験者を30台のビデオカメラで撮影し,深層学習エンジンに入力して感情の数値化を行った。同時に,被験者の心拍数の取得,LF/HFの計算,緊張/リラックスの状態遷移の分析も行った。実験結果を,演奏中・上演中の映像と同期させて可視化し,鑑賞中の被験者の感情の遷移と緊張/リラックス度の遷移を映像化した。更に,Happinessの感情に着目し,観客間での相関性を調べ,人による目視だけでは難しかった被験者の感情の類似性を定量的に示せることを確認した。(著者抄録)

シソーラス用語： *顔画像 ,  *推定 ,  *可視化 ,  *聴覚 ,  機械学習 ,  実験
準シソーラス用語： *音楽聴取 ,  *感情推定 ,  深層学習 ,  *数値化 ,  被験者実験

分類 (1件)： 図形・画像処理一般  (JE04010I)

引用文献 (6件)：

• Alex Krizhevsky, Ilya Sutskever, Geoffrey E. Hinton, “ImageNet classification with deep convolutional neural networks,” Proc. Advances in Neural Imformation Processing Systems (NIPS2012), pp.1097-1105, Dec. 2012.
• Microsoft Face API, Available: https://azure.microsoft.com/ja-jp/services/cognitive-services/face/.
• 中川千鶴, “人間工学のための計測手法: 生体電気現象とその計測と解析 (5) 自律神経系指標の計測と解析 ,” 人間工学, vol. 52, no. 1, pp. 6-12, 2016年2月.
• 吉武康栄, “生体信号処理のレシピ,” 大分看護科学研究, vol. 4, no. 1, pp. 27-32, 2003年4月.
• FFmpeg, Available: https://www.ffmpeg.org/

タイトルに関連する用語 (8件)： 顔画像 ,  感情 ,  数値化 ,  可視化 ,  音楽 ,  鑑賞 ,  落語 ,  評価実験