Sin embargo, cuando el Estado de Virginia abandonó la Unión en abril de 1861, Lee renunció y el comando de las fuerzas federales que defendían la capital de Washington D.C.