VALL-E è un "modello di linguaggio codec neurale" per la sintesi vocale (Text To Speech), cioè può sintetizzare una voce da un testo scritto. Per fare ciò, i ricercatori hanno utilizzato l'apprendimento automatico e addestrato l'intelligenza artificiale con oltre 60.000 ore di dati vocali in inglese pronunciati da più di 7.000 parlanti che leggono audiolibri gratuiti di dominio pubblico disponibili su LibriVox. Microsoft ha condiviso diversi frammenti ottenuti su Github. La prima tabella è divisa in quattro colonne che contengono ciascuna un audio. Il primo, intitolato "Speaker Prompt", è l'audio di tre secondi che consente a VALL-E di sintetizzare una voce. La seconda, "Ground Truth", è una registrazione fatta dallo stesso relatore per poterla confrontare con il risultato ottenuto dall'IA di Microsoft. Il terzo, "Baseline", è un estratto ottenuto con una sintesi vocale convenzionale. Infine, la colonna "VALL-E" contiene lo snippet pronunciato dall'intelligenza artificiale di Microsoft. Per saperne di più