Ganed Williams yn Aberaman, Aberdâr, yn y flwyddyn 1861, yn ail fab i David Williams, glowr a Hannah (1838-1916), ei wraig. Roedd gwreiddiau teulu'r tad yn Cilycwm Sir Gaerfyrddin.