Да 1698 года англійскія каралі жылі ва Уайтхоле і толькі пасля яго знішчэння ў 1698 г. Сент-Джэймскі палац стаў асноўным месцазнаходжаннем каралеўскага двара. Прыдворныя жаліліся на цеснату і старасць памяшканняў, так што іх прыпадала ўвесь час рамантаваць і пашыраць. Самі манархі аддавалі перавагу больш ціхаму і ўтульнаму Кенсінгтонскаму палацу, і пасля вялікага пажару 1809 года палац на Пэл Мэл быў імі фактычна закінуты.