Aunque Williams se casó con su primera novia, Florence Conway, en 1917, tuvo que pugnar toda su vida con el conflicto entre el amor (probablemente no consumado) que sintió toda su vida por Phyllis Jones (que entró en la Oxford University Press en 1924 como bibliotecaria) y su fe cristiana.