Dømmesmoen var en stor offisergård som i 1781 ble delt til en øvre og en nedre gård. Nedre Dømmesmoen var fra 1856 eid av de to brødrene Ole og Lars Dømmesmoen. Øvre Dømmesmoen var fra 1808 i familien Pharos eie. Familien Pharo var kjøpmenn og skipsredere. Da Fjære ble eget kirkesogn i 1846, ble Dømmesmoen prestegård. Det nyopprettede Fjære prestegjeld omfattet også Grimstad.