文献

J-GLOBAL ID：201202243117315697   整理番号：12A0055783

大規模分布類似度計算のためのベイズ手法を用いた新しい類似尺度

A Bayesian Similarity Measure for Large-scale Calculation of Distributional Similarities

著者 (7件)： 風間淳一 (情報通信研究機構) ,  DE SAEGER Stijn (情報通信研究機構) ,  黒田航 (京都工繊大) ,  黒田航 (京大) ,  黒田航 (早稲田大 総合研究機構) ,  村田真樹 (鳥取大 大学院工学研究科) ,  鳥澤健太郎 (情報通信研究機構)
資料名： 情報処理学会論文誌ジャーナル(CD-ROM)  (情報処理学会論文誌 論文誌ジャーナル(CD-ROM))
巻： 52  号： 12  ページ： 3349-3362  発行年： 2011年12月15日 
JST資料番号： Z0778B  ISSN： 1882-7837  資料種別： 逐次刊行物 (A)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： これまで提案されている語の意味的類似度尺度は,文脈プロファイルを限られた量のデータから点推定で求めて利用していることから,データスパースネスに対して頑健ではない。本論文は,ベイズ推定の手法を用いた頑健な意味的類似度計算方法を提案する。提案手法は,ベイズ推定により得られた文脈プロファイルの分布の下で元となる類似度の期待値をとることにより類似度を計算する。文脈プロファイルが多項分布で表現され,ベイズ推定における事前分布がDirichlet分布であり,元となる類似度がBhattacharyya係数である場合,この方法は解析解を持ち,効率的に計算できる。日本語の大規模語彙に対する類似度計算において,提案手法が既存のよく知られた意味的類似度尺度よりも優れていることを実験で示す。(著者抄録)

シソーラス用語： 類似性 ,  *意味論 ,  *Bayes推定 ,  期待値 ,  度 ,  分布 ,  確率分布 ,  係数 ,  日本語 ,  *語彙 ,  大規模系 ,  評価試験 ,  *意味解析
準シソーラス用語： 意味的類似性 ,  類似度 ,  事前分布 ,  Dirichlet分布 ,  Bhattacharyya係数

分類 (3件)： 情報加工一般  (AC05010A) ,  システム・制御理論一般  (IA02010H) ,  自然語処理  (JE06000L)

引用文献 (28件)：

• 1) Bhattacharyya, A.: On a measure of divergence between two statistical populations defined by their probability distributions, Bull. Calcutta Math. Soc., Vol.49, pp.214-224 (1943).
• 2) Chen, S.F. and Goodman, J.: An empirical study of smoothing techniques for language modeling (1998). TR-10-98, Computer Science Group, Harvard University.
• 3) Chen, S.F. and Rosenfeld, R.: A Survey of Smoothing Techniques for ME Models, IEEE Trans. Speech and Audio Processing, Vol.8, No.1, pp.37-50 (2000).
• 4) Cortes, C. and Vapnik, V.: Support Vector Networks, Machine Learning, Vol.20, pp.273-297 (1995).
• 5) CRL: EDR Electronic Dictionary Version 2.0 Technical GUIDE (2002). Communications Research Laboratory (CRL).

タイトルに関連する用語 (7件)： 大規模 ,  分布 ,  類似度 ,  計算 ,  手法 ,  類似 ,  尺度