Han var sønn av kjøpmannen Jørgen Rolfsen og Susanne Marie Hansen, ble student i 1827 og i 1833. I mellomtiden hadde han fra 1829 til 1831 vært konstituert som adjunkt ved Kristiansand katedralskole. I 1834 ble han ansatt som kopist i Justisdepartementet, hvor han i 1840 ble konstituert som fullmektig.