%時代とともに意味が変化する単語をコーパスから自動的に検出・分析する研究は，自然言語処理の研究者から注目を集めている．英語やドイツ語などの言語では，時期の異なる学習用コーパス（通時コーパス）の公開や評価用単語セットの作成が進んでいるため，盛んに研究が行われているが，日本語では不十分である．そこで本研究では，日本語の評価用単語セットJaSemChangeを作成した．作成にあたり，近代から現代までを扱う3つの通時コーパスを使用し，対象単語の用例ペアをサンプリングした．19個の対象単語に関する合計2,280の用例ペアに対して4人の専門家が意味類似度をアノテーションし，それらを用いて単語の意味変化度合を算出した．その後，本評価セットを用いて，単語ベクトルに基づく意味変化検出手法の性能評価を行った．頻度に基づく手法をベースラインとし，タイプベースとトークンベースの代表的な手法の性能を比較し，それぞれの手法の特徴を議論した．本研究で作成した，意味変化度合が付与された単語セット，および用例ペアに対するアノテーションスコアはGitHubで公開した．\renewcommand{\thefootnote}{}\footnote[0]{本研究はPacificAsiaConferenceonLanguage,InformationandComputation(PACLIC37)及び，言語処理学会第30回年次大会(NLP2024)で発表した内容\cite{ling-etal-2023-construction,凌-etal-2024-拡張}を拡張したものである．}\renewcommand{\thefootnote}{\arabic{footnote}}