Der osmanische Korsarenführer Dragut ließ die Festung um 1550 weiter ausbauen, um sich vor den Vergeltungsaktionen der christlichen Seefahrer (hauptsächlich Spanier) besser schützen zu können. Im Jahr 1560 suchten diese jedoch die Entscheidung und erschienen mit einer Flotte von 30 Schiffen und 30.000 Mann vor Houmt Souk. Sie eroberten zwar recht schnell die Festung und ließen eine Besatzung von 5000 Mann zurück, aber auf dem Rückweg überfiel Dragut mit seiner Flotte die abziehenden Spanier und Malteser und besiegte sie in der Seeschlacht von Djerba, in der 18.000 Mann ihr Leben verloren. Die immer noch besetzte Festung wurde belagert, und nachdem die Besatzung aufgab, wurde diese bis auf den letzten Mann geköpft. Zur Abschreckung ließ der Korsarenführer die Köpfe zu einer Pyramide auftürmen. Fast 300 Jahre lang war dieses makabre Symbol zu sehen. 1848 wurde es auf Drängen der europäischen Mächte beseitigt und anstelle dessen ein Obelisk in der Nähe der Festung errichtet.