文献

J-GLOBAL ID：202402280651990617   整理番号：24A0234488

理解度の表出パタンのユーザ間類似度を用いた理解度推定技術の検討

Understanding level estimation using similarities between users’ understanding expression patterns

著者 (6件)： 北岸佑樹 (NTT) ,  北岸佑樹 (関西大) ,  俵直弘 (NTT) ,  小川厚徳 (NTT) ,  浅見太一 (NTT) ,  米澤朋子 (関西大)
資料名： 電子情報通信学会技術研究報告(Web)  (IEICE Technical Report (Web))
巻： 123  号： 266(PRMU2023 15-38)  ページ： 56-61 (WEB ONLY)  発行年： 2023年11月09日 
JST資料番号： U2030A  ISSN： 2432-6380  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： web会議に参加する聴衆個々の,第三者から見た理解している/していない様子を理解度と定義し,聴衆の上半身が映る動画から理解度を推定する.理解度などの内面推定においては,ユーザ毎の表出パタンの個人差が精度劣化の主要な原因と考えられており,推定モデルをユーザ毎に学習し,各モデルの推論結果を表出パタンの類似度に基づいて重み和する方法や,個人を識別する情報を補助情報として用いる方法が,個人差に起因する精度劣化を抑える手法として提案されている.しかしこれらの手法には,学習/推論コストがユーザ数に応じて増加する,個人識別情報に表出パタンの類似性が十分に表れるとは限らない,といった問題がある.本稿では1)理解度の表出パタンの類似性を直接表現できる理解度類似ベクトルを新たに導入し,2)このベクトルを,個人差を表すための特徴量として用いることで,全ユーザ共通の単一モデルで個人差を考慮した理解度推定を行う手法を提案する.実験の結果,ベースラインおよび従来法と比べてunweighted average recallにおいてそれぞれ最大12.8%,13.6%改善した.(著者抄録)

シソーラス用語： *理解 ,  類似性 ,  表情 ,  動作 ,  ベクトル ,  *パターン認識 ,  データ処理 ,  身体動作 ,  特徴ベクトル

分類 (1件)： パターン認識  (JE07000S)

引用文献 (21件)：

• A. Matsufuji, E. Sato-Shimokawara, and T. Yamaguchi, “Adaptive personalized multiple machine learning architecture for estimating human emotional states,” Journal of Advanced Computational Intelligence and Intelligent Informatics, vol.24, no.5, pp.668-675, 2020.
• C.L. Monie, N. Obin, and A. Roebel, “Speaker attentive speech emotional recognition,” Proc. of INTERSPEECH, pp.2866-2870, 2021.
• A. Arezzo and S. Berretti, “SPEAKER VGG CCT: Cross-corpus speech emotion recognition with speaker embedding and vision trans-formers,” Proc. of International Conference on Multimedia in Asia, pp.1-7, 2022.
• Z. Tong, Y. Song, J. Wang, and L. Wang, “VideoMAE: Masked autoencoders are data-efficient learners for self-supervised video pre-training,” Advances in Neutral Information Processing Systems, pp.10078-10093, 2022.
• W. Kay, J. Carreira, K. Simonyan, B. Zhang, C. Hillier, S. Vijayanarasimhan, F. Viola, T. Green, T. Back, P. Natsev, M. Suleyman, and A. Zisserman, “The kinetics human action video dataset,” arXiv:1705.06950, 2017.

タイトルに関連する用語 (5件)： 理解 ,  表出 ,  パタン ,  類似度 ,  推定