ગૃહયુદ્ધ દરમિયાન, તેના ચાર ભાઈઓ સંઘીય સેનામાં જોડાયા અને મેરી પર કન્ફેડરેટ જાસૂસ હોવાનો આરોપ મૂકવામાં આવ્યો.