、1845年（弘化2年）（1859年（安政6年）焼失）、1860年（万延元年）（1863年（文久3年）焼失）と再建・焼失を缲り返している。文久の焼失以降は本丸御殿は再建されずに、机能を西ノ丸御殿に移している。
二ノ丸御殿.1636年（寛永13年）に最初に建てられた御殿は小堀远州の手によるもので、表向の机能が省略された极めて游兴性の高いものであった。南西にある筑山を背后に有し白鸟濠と繋がる池の中には能舞台（水舞台）があり、対岸の畔にある御座や濠に突き出た钓殿から観覧することができた