Byen ble grunnlagt av keiser Augustus i 15 f.Kr. under navnet , men fikk byrettigheter først i år 121 under keiser Hadrian. I Romerriket var dette hovedstad i provinsen Raetia og den nest største byen nord for Alpene – med om lag 12 000 mennesker – bare overgått av Trier. Byen ble inntatt av alemannerne i 450, men ble spart for ødeleggelse fordi den i århundrer forble en viktig katolsk valfartsby og bispesete, til minne om martyren Sta. Afra (død i 304).