大規模言語モデルにおける日本語ゼロ照応解析能力の分析

GPT-4に代表される大規模言語モデルは言語処理の様々な下流タスクで好成績を収めることが明らかになっているが，その能力が真に言語の基礎的理解能力に由来するものであるかは明らかではない．本研究では，自然言語処理の基礎解析タスクの中でも困難なものの一つとされてきたゼロ照応解析タスクについて，大規模言語モデルの能力を評価する．実験の結果，GPT-4はゼロ照応解析において十分な性能を発揮しないことが明らかになった．その原因を特定するための検証実験とエラー事例分析の結果から，ヲ格とニ格に関する格フレーム知識と，ニ格に関する選択選好知識の不足が原因であると示唆された．