Galton nació en "Los Alerces", una gran casa de Sparkbrook en el área de Birmingham, Inglaterra, construida en lugar de la antigua casa de Joseph Priestley "Fair Hill" que el botánico William Withering cambió el nombre.