BERTによる辞書推定システムを用いた近代以前の日本語文書の形態素解析の精度向上

本研究では，BERTにより形態素解析用の辞書の推定を行うことで，近代以前の日本語文書の形態素解析の精度を向上させる手法を提案する．形態素解析用の辞書作成時に用いたデータを用いてBERTをﬁne-tuningし，文書分類を行うシステムを作成した．形態素解析の対象文書を，作成した文書分類システムに入力し，出力された文書クラスの辞書を用いて形態素解析を行った．また，二つのベースラインとその文書の正解の辞書を用いた手法（Oracle手法）と比較した．実験の結果，提案手法はベースラインを常に上回り，いくつかの文書ではOracle手法を上回った．