1952年、父クラックストンのアルコール中毒が原因で両親が離婚した後は弟は母方の祖母に引き取られ、ラリーは母親に連れられインディアナ州に移るが、母親の交際相手と折り合いが悪かった為わずか2年で父親の住む故郷ケンタッキー州に戻ることとなった。
1951年，他的妹妹朱迪因身患白血病而去世，这还导致他的父母在一年后离婚，拉瑞与母亲去了印第安纳州，而他的弟弟吉米则与外祖母一起待在马哥芬县。