Jørg Berge var sønn av en skipper og navigasjonslærer. Selv tok han styrmannseksamen og reiste til sjøs i flere år. Da han ble syk, mønstret han av i Montréal i Canada. Her konverterte han til den katolske kirke.