現時点では、日本語対応のLLM-as-a-Judgeはまだ発展途上です。日本語に対応したモデルが少なく、英語圏のモデルが主流となっています。
しかし、日本語対応のLLM評価技術の開発も進められており、今後の改善が期待されています。そのためLLM-as-a-Judgeを日本語環境へ導入するには、ChatGPTなど一般利用可能なLLMのカスタマイズが必要です。