Su padre, Charles Robert Sherman, un exitoso abogado que trabajaba en la Suprema Corte de Ohio, murió repentinamente en 1829.