Foruten et par franske skolebøker utga Gjertsen først og fremst en rekke norske oversettelser av klassiske verker. Sammen med rektor Carl Müller utga han i 1878 en norsk oversettelse av Horats’ brev, og i sammen med Sophus Bugge foresto han i 1873 en utgave med oversettelse av Plautus’ . Fra tysk oversatte han Goethes (1873) og Grillparzers (1891). I sine senere år var han særlig opptatt med oversettelser av greske dramaer.