Een groot deel van het huidige Zuid werd vroeger ingenomen door de citadel, ook wel het Zuidkasteel genoemd. Deze dwangburcht werd in de periode 1568-1572 gebouwd naar een ontwerp van ingenieur Paciotto, in opdracht van de hertog van Alva, om de oproerige stad Antwerpen te kunnen beheersen. Kort na de val van Antwerpen (1585) kreeg het zijn vijfhoekige vorm, met vijf bastions. In de loop van de 17de en 18de eeuw werden bijkomende versterkingen aangelegd rond de citadel. Binnenin de citadel stonden tal van gebouwen met uiteenlopende functies: kazernes, kruitmagazijnen, bomvrije ruimten, een kapel, enz. De huidige Lambermontplaats bevindt zich op het toenmalige binnenplein.