El castillo permaneció como posesión de la , que asumirá luego la denominación "Fieschi Doria" y luego "Doria Pamphili", hasta la supresión de los feudos imperiales en 1797.