Con la anexión de Austria a la Alemania nazi en 1938, los nazis confiscaron el palacio. Dado que el heredero, el conde Anton Lanckoroński, era ciudadano polaco, recibió el nuevo "Reglamento sobre el tratamiento de los bienes de los nacionales del antiguo Estado polaco". La colección de arte restante fue confiscada en 1939 después del estallido de la guerra con Polonia.