Utenom stillingene i embetsverket skrev Arentz for en rekke forskjellige aviser, blant annet som kunst- og teeateranmelder for . Fordi han var Christiania-korrespondent for fikk han tilnavnet «Drammenshans». På forskjellige tidspunkt var han også korrespondent for , , i København og . Han oversatte en rekke franske skuespill for Christiania Theater.