Williams andre søsken omfattet Levin, jr.; Peter, Jakob; Samuel; Maria, lærer og misjonær i African Methodist Episcopal Church, Mahala (som giftet seg med Gabriel Thompson), og Kitturah som flyttet til Pennsylvania.