Både Arveschoug og hans kone var ivrige amatørskuespillere, da det første Drammens teater skulle bygges i Austadstredet bidro han til finansieringen med et lån på 500 rdl.