文頭・文末予測の組み合わせによる文特定

文分割とはテキストを連続する文の単位に分割する前処理を指す.本稿ではこれを拡張し,テキスト中の文でないノイズを除去しつつ,解析対象とすべき文のみを抽出する文特定タスクの定式化を行う.また,文頭・文末予測を組み合わせることで文特定を行う新たな手法を提案する.最後に,UniversalDependencies(UD)のアノテーションに基づく言語横断的なベンチマーク手法を設計し,UDの英語コーパスEnglishWebTreebank(EWT)を用いた実験により提案手法の精度・有用性を検証する.