然而不论是忠乡，还是嫡次男忠知都发生无嗣子可传家的情形（忠知有七个女儿却无子），因此忠知被幕府裁定移封到伊予国松山（今天爱媛县松山市），俸禄也从会津60万石锐减成松山24万石。若松城只有再一次易主。
加藤时代.新的城主名为加藤嘉明，是从松山移封过来的关原会战有功大名。由于庆长16年8月21日（1611年9月27日）发生了震度高达六级的，原来的天守倾杞，于是嘉明的儿子重新修建，改为今日所见的层塔型天守。尽管明成有魄力，或许有建筑上的天份，但是他也是个相当糟糕的藩主，缺乏凝聚人心的