ビジョントランスフォーマーに特有の脆弱性は、主に対話型学習の特性に起因します。従来のバックドアアタックは、特定のタスクに対して事前に定義されたトリガーを使用することが一般的でしたが、ViTでは、モデルが与えられたコンテキストに基づいて動的にタスクを選択するため、攻撃者はより柔軟に悪意のある動作を設計できます。具体的には、タスク特異的バックドアとタスク非特異的バックドアの2つの攻撃手法が存在し、前者は特定のタスクに対してのみ影響を与えるのに対し、後者は未学習のタスクにも影響を及ぼすことができます。このように、ViTは多様なタスクに対して脆弱であり、攻撃者は少数のサンプルからでも効果的なバックドアを注入できるため、従来の手法よりもリスクが高いと言えます。