テキスト生成モデルによる日本語形態素解析

統合的日本語解析器KWJA1.0は形態素解析を汎用言語モデルに基づくトークン分類問題として定式化した．しかし単語の読み，原形等はラベル集合が開放的であり，分類問題としては扱いづらい．本研究ではそうしたタスクをテキスト生成モデルで解く手法を提案する．提案手法は実装とタスク設計を単純化しつつ，特に読みと代表表記の推定で既存の形態素解析器を上回る精度を示した．提案手法はKWJA1）の形態素解析モジュールとして実装する予定である．