Svanholm var frimurer, og var leder for frimurerlosjen i Stavanger, St. Andreaslogen Utstein fra 1963 til 1981.