レストラン検索・予約サイトの投稿画像分類における

レストラン検索・予約サイトの投稿画像を「料理」や「ドリンク」といった種別に分類することは，ユーザーが目的の写真を効率よく閲覧することに貢献する．大量の画像を人手で分類するのは多大な時間と労力を有するため，自動分類モデルを用意するのが望ましい．しかし，従来の教師あり学習モデルは学習データの作成にコストがかかる．そこで，大量の画像−テキストペアで事前学習されたマルチモーダルモデルを使うことで，学習データ作成にかかるコストを無くし，画像をゼロショットで自動分類することを試みた．その結果，複数の画像種別において実用的な分類性能を達成し，人手による作業を大幅に削減できることを確認できた．