天守は老朽化により1884年（明治17年）に解体され、1920年に松平家初代藩主松平頼重を祀った玉藻廟が建立された。
天守在1884年因为老化而被拆除，1920年在原址修建了祭祀松平家初代藩主松平赖重的玉藻庙。