Art

J-GLOBAL ID：200902230448188865   Reference number：09A0007158

Language Identification Using Statistical Hypothesis Testing for Similar Languages

仮説検定に基づいた言語識別

Author (3)： MIZUTA TAKAAKI (九大 大学院システム情報科学府) ,  SHIBATA MASAHIRO (九大 大学院システム情報科学研究院) ,  TOMIURA YOICHI (九大 大学院システム情報科学研究院)
Material： 情報処理学会研究報告  (IPSJ SIG Technical Reports)
Volume： 2008  Issue： 113(NL-188)  Page： 91-98  Publication year： Nov. 19, 2008 
JST Material Number： Z0031B  ISSN： 0919-6072  Document type： Article
Article type： 原著論文  Country of issue： Japan (JPN)  Language： JAPANESE (JA)

Thesaurus term： *automatic language processing ,  *corpus ,  large scale system ,  *hypothesis testing ,  *fluctuation ,  statistical analysis ,  experiment ,  document ,  small scale ,  accuracy ,  system evaluation
Semi thesaurus term： *言語識別 ,  evaluation experiment

JST classification (3)： Natural language processing  (JE06000L) ,  Information processing in general  (AC05010A) ,  System and control theory in general  (IA02010H)

Reference (7)：

• CAVNAR, William B. N-gram-based text categorization. Proceedings of Symposium on Document Analysis and Information Retrieval, 1994. 1994, 161-176
• DUNNING, T. Statistical identification of language. 1994
• KITA, Kenji. Reconstructing the language family tree from multilingual corpus based on probabilistic language modeling. Natural Language Processing. 1997, 4, 3, 71-82
• SIBUN, Penelope. Language identification : Examining the issues. Proceedings of the 5th Symposium on Document Analysis and Information Retrieval, 1996. 1996, 125-135
• YUKINO, Kensei. Robust language identification for similar languages and short texts using low-frequent byte strings. Proceedings of Pacific Association for Computational Linguistics (PACLING'05). 2005, 368-373

Terms in the title (3)： 仮説検定 ,  言語 ,  識別