ジョージ王は1806年、生涯最後のキュー訪問のおりに城壁宮殿の建築現場を視察、1809年には結核にかかった末娘アメリア王女がダッチハウスに移って快復に努めたいと希望したため、改装される。