Billy Bob se casó cinco veces y tiene cuatro hijos: su hija Amanda (fruto de su matrimonio con Melissa Lee Gatlin); sus hijos William y Harry (de su matrimonio con Pietra Dawn Cherniak); y su hija Bella, nacida en septiembre de 2004 diez años antes del matrimonio con la madre, Connie Angland.