Las torres medievales pudieron conservase hasta mediados del siglo XVII, basándose en la acuarela que Pierre Boller hizo del Palacio entonces.