Etter sin fars død i 1757 arvet han nesten 18 000 acre (73 km²) land og om lag 285 slaver. I januar 1759 giftet hans mor seg med George Washington. Washington oppdro ham og hans yngre søster, Martha (Patsy) Parke Custis (1756-1773) på Mount Vernon. Washington ble hans verge og administrator av Custis Estate. Ved søsterens død i 1773, sytten år gammel, ble Custis den eneste arving av Custis' eiendom.