I 1961 blei han skutt og såra av ei venninne, Juanita Jones, angivelig på grunn av sjalusi da han hadde en affære med modellen Harlean Harris. Det blei imidlertid dyssa ned av hensyn til Wilsons rykte. I 1967 gifta han seg med Harris, men de skilte lag etter kort tid. Han bodde så i mange år sammen med Lynn Crochet, og de fikk to barn. Wilson hadde også et par barn utenom ekteskap.