文献

J-GLOBAL ID：202202213800016712   整理番号：22A2387584

やさしい日本語へのテキスト平易化のための訓練データの精選

Towards Parallel Corpus Filtering for Japanese Text Simplification

著者 (3件)： 畠垣光希 (愛媛大) ,  梶原智之 (愛媛大) ,  二宮崇 (愛媛大)
資料名： 情報科学技術フォーラム講演論文集  (FIT)
巻： 21st  号： 第2分冊  ページ： 293-300  発行年： 2022年08月30日 
JST資料番号： L4664A  資料種別： 会議録 (C)
記事区分： 原著論文  発行国： 日本 (JPN)  言語： 日本語 (JA)

抄録/ポイント： ・ノイズ文対を検出する手法を提案し,パラレルコーパスフィルタリングによるテキスト平易化の性能の変化を評価。
・テキスト平易化モデルは,大規模コーパスを用いて事前訓練された系列変換モデルBARTを利用し,やさしい日本語コーパスを用いてファインチューニングを実施。
・実験結果から,やさしい日本語コーパスにおいて,難解文と平易文の間の文長差および平易文の流暢性に基づくパラレルコーパスフィルタリングが有効であることが判明。

シソーラス用語： *日本語 ,  データ ,  フィルタリング ,  コーパス ,  表現 ,  自然言語処理 ,  言語モデル ,  指標 ,  性能評価 ,  度 ,  閾値 ,  集合 ,  文書処理 ,  分散表現 ,  評価指標 ,  データセット
準シソーラス用語： 訓練データ ,  パラレルコーパス ,  類似度 ,  テキスト処理

分類 (1件)： 自然語処理  (JE06000L)

引用文献 (42件)：

• 岩田一成. 言語サービスにおける英語志向 : 「生活のための日本語: 全国調査」結果と広島の事例から. 社会言語科学, Vol. 13, No.1, pp. 81-94, 2010.
• 梶原智之, 小町守. 平易なコーパスを用いないテキスト平易化.自然言語処理,Vol. 25, No. 2, pp. 223-249, 2018.
• 梶原智之, 西原大貴, 小平知範, 小町守. 日本語の語彙平易化のための言語資源の整備. 自然言語処理, Vol. 27, No. 4, pp. 801-824,2020.
• 中町礼文, 梶原智之. 事前訓練済み系列変換モデルに基づくやさしい日本語への平易化. 情報処理学会第83回全国大会, pp. 607-608, 2021.
• 山本和英, 丸山拓海, 角張竜晴, 稲岡夢人, 小川耀一朗, 勝田哲弘, 髙橋寛治.やさしい日本語対訳コーパスの構築. 言語処理学会第23回年次大会, pp.763-766, 2017.

タイトルに関連する用語 (3件)： 日本語 ,  訓練データ ,  精選