金融テキストからの類似文の自動収集

本研究では有価証券報告書データから類似文を自動的に収集する手法を提案する．タグと文末表現が一致する文ペアの中で，単語のTFIDF値を要素とした単語ベクトルから求めたcos類似度とレーベンシュタイン距離との調和平均を算出し，類似文を収集する．収集した類似文を学習データとしてSentence-BERTで学習モデルを作成し，その学習モデルによる決算短信からの業績要因文の抽出により，収集した類似文を評価した．