Harrison levde hele sitt liv i Berkeley Plantation familiehjemmet til Harrison i Virginia, og hans barn ble født der.