Boyesen var sønn av Mikaline Fredrikke Bøyesen (1846) fra Skien, som var datter av Bøye og Marie Levorsen. Utenfor idretten arbeidet Boysen som politibetjent.