Anotasi video ialah melabelkan klip video yang digunakan untuk melatih model pembelajaran mesin untuk membantu sistem mengenal pasti objek. Anotasi video ialah proses yang kompleks, tidak seperti anotasi imej, kerana ia melibatkan pecahan keseluruhan video kepada beberapa bingkai dan jujukan imej. Imej bingkai demi bingkai diberi anotasi supaya sistem boleh mengecam dan mengenal pasti objek dengan tepat.