Augusta, princesa de Gales, amplió la casa, adquiriendo la estructura vecina que había sido la casa de Londres del amigo de principe, George Bubb Doddington, Lord Melcombe; en 1783, cuando el nieto de Federico y Augusta, Jorge, príncipe de Gales, se le concedió la posesión de Carlton House y 60000 libras (por votación del Parlamento) para renovar, esta era una laberíntica estructura sin cohesión arquitectónica.