日本初の海城である高松城に続いての海城の築城には財政難や海沿い特有の問題もあり、竣工までに14年の歳月を要したが、富江藩などからの資金援助もあり、1863年(文久3年)、第11代藩主・盛徳の代になり、ようやく念願であった居城(現代日本で最も新しく完成した城)が完成された。