Lendmannen Pål Vågaskalm bodde på Dønnesgodset rundt 1200, nevnt i Håkon Håkonssons saga og bygde en privat kirke og gravkammer. Bjarkøyætten kan ha overtatt eiendommen rundt 1300. Etterhvert ble Dønnesgodset en del av lensherre Erik Ottesen Rosenkrantz sitt landsomfattende kompleks av eiendommer på 1500-tallet.