視覚言語モデルにおける空間ダイクシス表現の運用能力の評価

本研究では視覚言語モデルの空間推論能力の評価の観点として，コンテクストを参照しなければ指し示すものが決定できない空間表現である空間ダイクシス表現（例:「この」）に着目する．視覚言語モデルがさまざまな言語において人間の言語使用に近い形で空間ダイクシス表現を運用できているかどうかを測る多言語のベンチマークを作成し，空間ダイクシス表現の使い分け方について視覚言語モデルと人間のパフォーマンスの比較を行う．分析の結果，視覚言語モデルは人間が使用する一部の指示語をほとんど使用しない場合があるなど，人間の言語使用とは異なった形で空間ダイクシス表現を使用していることが確認された．