健康経営度調査テキストに対する定量評価およびレコメンドアルゴリズムの提案

1.1研究背景健康経営とは、従業員等への健康投資を行うことで、従業員の活力や企業の生産性を向上させる取り組みのことである。健康経営を実施している企業は、当然ながら従業員の健康状態も良好な傾向がある。例として、健康経営度調査結果の中央値で高スコア群と低スコア群の2群に企業を分けて分析したところ、年間医療費平均、メタボ該当率など複数の指標において、高スコア群が低スコア群をいずれも下回る結果が得られた[1]。加えて、追跡期間14年間(2000年から2014年)において、健康経営に関する顕彰を受けた企業の株価は市場平均(S&P500株価指数)を大きく上回る上昇を示した[2]。従って、健康経営を行うモチベーションとしては従業員の健康状態を改善できるのみならず、企業の労働生産性を向上させ結果的に企業価値の上昇に繋がるといった点も考えられる。各法人の健康経営の情報は健康経営度調査[3]に記載されており、これらのうち数値データについては[1]など複数の研究において分析されているものの、テキストデータについては着目されて来なかった。ただし、具体的な施策やその実施結果などの有用性の極めて高い情報がテキストデータとして記載されているため、これらの評価を行うための手法を確立することが重要と考えられる。1.2データセット本研究では、令和5年度の健康経営度調査の評価結果（フィードバックシート）のデータを使用した[3]。健康経営度調査は、評価結果の開示に同意した健康経営度調査回答法人に対する評価結果をまとめたものである。このデータは多数の列を含むが、今回は総合評価(数値データ)および「課題内容、施策実施結果、効果検証結果」(テキストデータ)の列を使用した。表1に例を示す。1.3関連研究価する手法として、LLM-as-a-Judgeが考えられる。LLM-as-a-Judgeとは、LLMを利用してテキストの有用性、無害性、信頼性、関連性などを評価する手法であり、人間の感覚や常識に基づく評価をLLMで自動化することが可能である[4]。LLM-as-a-Judgeにおいては絶対評価を行う手法も存在する。ただし、今回のケースにおいては相対評価を複数回実施した上で比較観点を抽出し、それらの観点に基づく評価を行う方が一貫性および説明性の面から望まし総合評価620.4課題内容冬に社内でインフルエンザが流行し、業務に多大な影響が出る。施策実施結果全従業員のうち希望者にワクチン接種会社費用負担で実施した。効果検証結果インフルエンザ感染者が減少し、業務への影響を低減できた。.いと考えられる。そのための手法の1つとして、2つの内容をLLMに比較させることでランク付けを行うペアワイズ評価が存在する[5]。ペアワイズ評価はLLMの出力評価に使用されることが多いが、人手で記載されたテキストに対しても有用と考えられる。そのため、本研究においては各企業の健康経営度調査票のテキストに対してペアワイズ評価を行った。