Omkring 1650 overtok Magnus Gabriel De la Gardie Drottningholm, han interesserte seg for bygningen og dens vedlikehold. Han startet også et restaureringsarbeide under ledelse av arkitekt Jean de la Vallée.