William Henry Leonard se fue a vivir con sus abuelos paternos a Baltimore, Edgar fue aceptado por John y Frances Allan de Richmond, y Rosalie fue adoptada por William y Jane Scott Mackenzie, también de Richmond.