Byen lå en stund på en øy omsluttet av Aar-elva og lille Aar-elva. Gamlebyen vokste rundt øyas kyst med en stor offentlig plass i midten. I tillegg til gamlebyen omfatter Aarberg også nye bebyggelser og landsbyene Spins, Mühletal og Grafenmoos.