Tuttavia dopo la sconfitta dei confederati nella Battaglia di Antietam nel settembre del 1862 e la successiva proclamazione di emancipazione, Palmerston declinò l'offerta di Napoleone III di Francia di cercare di arbitrare insieme il conflitto. Palmerston comprese quindi la delicata posizione dell'Inghilterra e che il coinvolgimento della nazione in quella guerra non avrebbe apportato nulla di positivo in più e lasciò perdere ogni sostegno o ambizione. A partire dal 1863, la rivolta polacca contro la Russia, distrasse ulteriormente le potenze europee che assicurarono la loro neutralità.