Stoughton, 13 Aralık 1862'de Fredericksburg Muharebesi'nde 4. Vermont'un 56 zayiat verdiği alayı yönetti. "Renklerim teneke kutu ve tüfek topları ile tamamen oyulmuştu, neredeyse hiç birbirine sarkmıyordu. Üzerinde pirinç bir kartal bulunan asanın tepesi teneke kutu ile vuruldu, ancak kurtarıldı ve götürüldü. "