文献

J-GLOBAL ID：200902267816453109   整理番号：08A0869265

情報アクセス対話のための質問応答技術評価タスク

Evaluation Task of Question Answering for Information Access Dialogues

著者 (4件)： 加藤恒昭 (東大) ,  福本淳一 (立命館大) ,  桝井文人 (三重大) ,  神門典子 (国立情報学研)
資料名： 自然言語処理  (Journal of Natural Language Processing)
巻： 15  号： 3  ページ： 53-75  発行年： 2008年07月10日 
JST資料番号： L3934A  ISSN： 1340-7619  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： あるトピックに関して対話的に行われる一連の情報アクセスを質問応答システムが支援する能力,情報アクセス対話の対話相手として情報を提供するために質問応答システムが持つべき能力を定量的に評価するためのタスクを提案する。このタスクでは,対話の実現の基本となる対話文脈を考慮した質問の解釈,つまり照応解消や省略処理等のいわゆる文脈処理の能力を評価する。本稿では,タスクの設計を示し,その根拠となる調査結果を報告する。提案するタスクは以下の点で新規かつ有益である。対話的情報アクセスを対象として,そこで必要な質問応答技術が効果的に評価できるという課題設定と構成の独自性を持つ。評価尺度については応答の自然性において問題となる回答の質や回答列挙の体系の違いに配慮し,複数の体系を許す多段階評価手法を備えている。システムの文脈処理能力をある程度まで切り離して評価することを可能とする参照用テストセットと呼ぶ枠組みを有している。(著者抄録)

シソーラス用語： *質問応答システム ,  会話型処理 ,  *会話 ,  *対話処理 ,  自然言語処理 ,  文脈 ,  タスクパフォーマンス ,  評価基準
準シソーラス用語： 自然性 ,  *情報アクセス対話 ,  評価尺度

分類 (2件)： その他の情報処理  (JE15050M) ,  自然語処理  (JE06000L)

引用文献 (29件)：

• AKIBA, T. Exploiting Dynamic Passage Retrieval for Spoken Question Recognition and Context Processing towards Speech-driven Information Access. Proceedings of The International Conference on Language Resources and Evaluation (LREC), 2006. 2006, 1530-1535
• ARDA. AQUAINT Home Page : Advanced Question & Answering for Intelligence. http://www.ic-arda.org/InfoExploit/aquaint/
• BURGER, J. Issues, Tasks and Program Structures to Roadmap Research in Question & Answering (Q&A). http://www-nlpir.nist.gov/projrcts/duc/roadmapping.html
• FUKUMOTO, J. Question Answering Challenge (QAC-1) An Evaluation of Question Answering Tasks at the NTCIR Workshop 3. AAAI 2003 Spring Symposium New Directions in Question Answering. 2003, 122-133
• HARABAGIU, S. Answering complex, list and context questions with LCC's Question-Answering Server. Proceedings of TREC 2001. 2001

タイトルに関連する用語 (5件)： 情報アクセス ,  対話 ,  質問応答 ,  評価 ,  タスク