Som tenåring havnet Ludvig på skråplanet. Det ble et liv som alkoholiker og uteligger. Det ble lovbrudd, arrestasjoner og fengselsopphold. Han giftet seg med Lise i 1965.