For å evaluere tekstklassifiseringen kan vi bruke den på en mengde nye, usette dokumenter, hvis klasser allerede er bestemt av mennesker - et testsett. Hvis en stor andel av dokumentene i testsettet bestemmes likt av veiledet læring klassifiseringen og av menneskenes klassifisering, kan vi si at både treningsprosessen og klassifiseringsprosessen fungerer bra, og klassifisereren kan brukes til å klassifisere nye dokumenter (som da naturlig nok er utenfor testsettet).