Il fratello di Garrett, Sean Williams, giocò a basket al Boston College e fu scelto come 17º assoluto nel Draft NBA 2007. Giocò nella NBA dal 2007 al 2010.