En el siglo XIX el castillo se convierte en cuartel general de las tropas francesas durante el asedio de Cádiz y San Fernando.