Tras jugar solamente un partido con Toronto en la campaña 2005-06, Williams regresó a la lista de lesionados y no volvió a jugar más con los Raptors.