Senere er slottet bygget om og utvidet flere ganger av blant annet arkitektene Nicolai Eigtved, de Thurah og C.F. Harsdorff, samt Vargas Fredriksson.