Antiguamente, el palacio estaba oficialmente controlado por el Gran Lord Chamberlain ("Lord Great Chamberlain") en su calidad de residencia real.