Samson Isberg flyttet til Bergen, etter sigende gikk han ikke overens med sin stemor. I Bergen gikk han underoffisersskolen og ble sersjant. Etter endt tjeneste ble han underinspektør ved Bergen Tukthus.