El palacio fue construido entre 1711 y 1719 a partir de materiales de piedra arenisca local, cuyo color dio lugar al nombre del palacio ("piedra blanca").