Fue el quinto de seis de los hijos habidos entre Robert Darwin, un médico y hombre de negocios acomodado, y Susannah Darwin (apellidada Wedgwood de soltera).