Gruppen var særlig utstøtt i middelalderen. Den første betegnelsen som trolig viser til de er fra år 1000; den første som bruker ordet «cagot» er fra 1288. Særbestemmelsene om cagotene ble opphevet på slutten av 1700-tallet, og de ble blant annet gitt fulle rettigheter under den franske revolusjonen, selv om uformell diskriminering kunne fortsette lokalt. Etter hvert ble cagotene likevel absorberte av lokalbefolkningen, eller de utvandret til den nye verdenen. I dag er det svært få som vil bekjenne et slik opprinnelse.