キュー宮殿
フォートリーが建てた1631年の建物に面した別棟も、おそらくチューダー朝に建築された。ジョン・イヴリンという日記家がこの邸宅をしばしば訪問し、応接した家主のリチャード・ベネットの相続人は息女ドロシーで、アイルランド出身の貴族ヘンリー・カペル(en)に嫁ぐ。カペル夫妻に子どもはなくドロシーの姪孫エリザベス・モリノー(夫君サミュエルは皇太子時代のジョージ2世秘書)が引き受け、次代はモリノー家の主治医ナサニエル・セントアンドレが継承する。この邸宅で1725年、ジェームズ・ブラッドリーが光行差を観測した。その記念にウィリアム4世は1832年、ハンプトン・コート宮殿にあったトーマス・トンピオン製日時計をダッチハウスの南東の台座に移し、ブラッドリーの事績を記した。その日時計は1959年以降、ダッチハウスのすぐ南に移設し、観察地点には複製品を置いてある。
1727年、キャロライン妃とジョージ2世はブリテン王位の継承権を得ると、それまで暮らした夏の離宮リッチモンド・ロッジから子ども6人を住み替えさせる。 女王は翌1728年に年かさの王女3人(アン、アメリア、キャロライン)の住まいとしてダッチハウスを借り受ける。
別に近隣の1軒を用意し、長男ウィリアム王子を住まわせようとしたと推量されるものの、この建物はのちのち「クイーンズ・ハウス」(女王の居館)と呼ばれることになる。こうして女王は年下の王女メアリーとルイーズを手元に残し、リッチモンド・ロッジで一緒に暮らす。
ジョージ1世が1714年に王位につくと、ジョージ2世とキャロライン妃はイギリスに移住、7歳の長男フレデリック王子はハノーファーに残される。王位を継承して父のジョージ2世が戴冠すると、フレデリックは皇太子に指名され、ようやくイギリスに渡る許しを得て1728年12月に到着した。キャロライン王妃がダッチハウスを借りて1年も経っていない。21歳になった皇太子は長年、妹たちと離れていたため家族との親密な関係を望んだ。そこで王妃はすぐに近隣の古いが由緒のあるカペルハウスを借りて皇太子の住まいにあてると、1731年には内装や家具を持ち主のセントアンドレから購入している。皇太子はウィリアム・ケントに依頼し館の改修を進め、やがて外装は漆喰塗りの白い壁に変わり、「ホワイトハウス」と通称されるようになる。皇太子はまた、広い厨房棟を別棟として建てさせ、これは2012年から「ロイヤルキッチン」として一般に公開を始めた。付属の厩舎は建設年が不明、本館の北東に少し離して建てさせたもので、19世紀後半に解体された。