Parameters zijn numerieke waarden die worden gebruikt om het gedrag van het model te definiëren door ze tijdens de training aan te passen. Tokens daarentegen zijn betekeniseenheden, zoals een woord, een voorvoegsel, een cijfer, interpunctie, enz.