JaSocial：LLMの社会的知能を評価するための日本語敬語使用フレームワーク

本稿では，選択体系機能言語学の理論枠組みに基づき，大規模言語モデル（LLM）の社会的知能を評価するための新しいフレームワーク「JaSocial」を提案する．この理論を日本語敬語の使用に適用することで，敬語表現が持つ社会的背景や役割に基づき，より詳細かつ包括的にLLMの能力を分析することができるフレームワークを設計した．さらに，このフレームワークの運用を支える専用の評価データセットを新たに構築し，様々なLLMによる日本語敬語生成の適切性を多角的に検証するための土台を提供する．