White House var stedet der jernbanelinjen Richmond and York River Railroad krysset Pamunkey-elven. Traseen mellom Richmond og West Point på denne jernbanelinjen ble fullført i 1861. Plantasjen og jernbanebroen over Pamunkey-elven ligger der Pamunkey-elven og Mattaponi-elven møtes og danner York River.