而到視覺信息理解結合埋自然語言處理嘅層面，有任務似描述生成（captioning）、即幫啲圖片抑或圖片當中嘅嘢（用到物體識別）生成一條簡要描述，同埋視覺問題回答（visual question answering）、即畀一幅圖同埋一個題目等電腦揀出抑或畀出啱嘅答案嘅。