Patterson tuvo problemas familiares en su juventud, con sus padres y una de sus hermanas adictos a las drogas y su padre en prisión.