Fue llamado en un principio Jakobsdal, y a la muerte de Jacob pasó a ser propiedad de su hijo Magnus Gabriel De la Gardie, quien vendió el palacio en 1669 a la entonces reina Eduviges Leonor.