Anne og Jens fikk 9 barn. Han døde i 1560, hvoretter hun som enke trolig ble sittende med godset til sin død i 1566. Heretter overtok sønnen Henrik, som fullførte byggeriet i 1577.