Grinderud vokste opp i Mjøndalen i Nedre Eiker kommune sammen med to søsken. Da Grinderud var 10 år, døde hans far Walther av hjertesykdom. Moren Wanda hadde et alkoholproblem som eskalerte etter ektemannens død. I seks år, fra Grinderud var 10 til han ble 16, tok han seg av sin mor. Da søsknene flyttet ut, sto han alene igjen med et stort ansvar. Wanda døde i 1978.