Under Peninsula-felttoget fungerte Frederick Law Olmsted – som blant annet er kjent for å ha laget plantegningene for New Yorks Central Park – som sekretær for den amerikanske Sanitetskommisjonen, som var en forløper til Røde Kors i Washington D.C., som ga sykepleie til Nordstatenes sårede soldater under borgerkrigen. Olmsted ledet den medisinske innsatsen for syke og sårede på White House-plantasjen frem til kommandanten McClellan ga ordre til sine tropper om å forlate eiendommen. Tilbaketrekningen skjedde i forbindelse med Syvdagersslaget, da McClellan flyttet hovedkvarteret til Harrison's Landing ved James-elven. Hovedbygningen på White House-plantasjen ble satt i brann av troppene til Nordstatene.