后在稻垣家8代的经营下才逐渐稳定下来。安政元年（1854年）由于地震导致城内天守以下的建筑物倒塌，但未加以修理，而到了明治四年（1871年）设置度会县的同时被出售且拆毁。
现状.现在鸟羽水族馆后面低矮的山丘便是鸟羽城所在处。本丸遗迹成了市立鸟羽小学校的运动场。山麓北侧的武家宅邸遗迹则建有市役所、城山公园、旧鸟羽幼稚园等等建筑，残留下来的遗迹只有本丸与旧家老宅邸的石墙。昭和四十年（1965年）12月时被指定为三重县史蹟。