Bi-encoderと𝑘NNの組み合わせによる職務記述書に書かれた文のスキルマッピング

スキルマッピングは職務記述書や履歴書中の文で言及されるオントロジーで定義されたスキルを特定する作業であり労働市場の分析に不可欠である．詳細な分析に必要な細分化されたスキルが付与された学習データを人手で構築するのは高いコストなため既存研究はLargeLanguageModel(LLM)が生成した合成データがbi-encoderの学習に用いる．合成データを活用したさらなる精度改善のため，提案手法(𝑘NNBE)は推論時に学習に利用したラベル付き合成文を𝑘-nearestneighbor(𝑘NN)によって取得し入力文との類似度をbi-encoderのスコアに加える．実験により𝑘NNBEはbi-encoderの精度改善，さらに既存の最高精度を示すLLMでスキルをリランキングする手法と比較して高いスループットを維持しながら精度改善を確認した．