Da Hølen ble innlemmet i Vestby kommune ble det bestemt at pengene byen hadde avsatt i fond ikke skulle tilfalle kommunekassen. I stedet ble Hølen Reservefond opprettet, og pengene ble satt på bok inntil man fant ut hva man skulle gjøre med dem. Etter at man hadde kjøpt opp Hølens Elektricitetsværk, ble det bestemt at resten skulle brukes til å kjøpe Elverhøy etter disponent Henriksens død. I 1954 stod bygningen klar, ominnredet til samfunnshus. Bygningen ble drevet med underskudd, og Hølen og Såner Vel tok over mot en symbolsk leie på en krone i året. Pr. 2006 er det fortsatt velet som driver Elverhøy, men Vestby kommune har tatt over det ytre vedlikeholdet, fyring, forsikringer og annet, mens velet leier bygningen for tusen kroner i året og har ansvar for indre vedlikehold.