Castellammare tornerà a crescere dopo i Vespri quando la cittadina fu terra baronale di proprietà di Federico d'Antiochia e diventa importante polo commerciale legato all'esportazione del grano. Di questo periodo è l'amplimento del castello sul mare. In particolare è il 10 gennaio 1338 che da proprietà demaniale regia diventa baronia sotto Raimondo Peralta. Nel 1554 il territorio diviene feudo di Pietro de Luna.