リーディング・スキル・テスト
東ロボくんの開発にあたり、プロジェクトチームがぶつかった問題が「過去問が圧倒的に少なすぎる」ということだった。AIの深層学習のために同じ形式の問題を数千は用意しなければならない。加えて、センター試験の問題は自然言語処理の課題として解くには複雑すぎ、もっと単純で、一貫性が担保されており、より広範囲に難易度も分布している問題群をつくらないと、AI技術の真の限界をあぶりだすことが難しい。
こうした問題意識から、「一貫性が保たれていて、公平で、高品質で、読解力を多面的に診断することができる大量の問題からなるベンチマーク」を求めていった結果、人間の読解力を診断し得るような高品質なベンチマークをつくり、人間がそれを受検する傍らで、AIにもそれを解かせてみるという研究をするのが最善だ、という結論に至り、リーディングスキルテストが生まれた。