Het eerste huis op deze plaats werd waarschijnlijk rond 1589 gebouwd door Achatius van Dohna. Het werd het “Neuen Haus” (Nieuwe Huis) genoemd. De opvolger van dit huis was een landhuis in Renaissancestijl naar 17e-eeuws Nederlands voorbeeld. Het werd in opdracht van Abraham van Dohna gebouwd. Hij was vestingbouwmeester en leidde zelf de bouw. In 1625 werden er lindebomen geplant langs de oprijlaan waarvan er tegenwoordig nog een paar over zijn. Abraham van Dohna liet in 1627 nog een grote zaal aanbouwen voor zijn omvangrijke bibliotheek. Het landhuis werd in de oorlog met Zweden verwoest maar weer herbouwd en werd later het centrale deel van het barokke slot.