Tyler fikk til sammen 15 barn med to ektefeller. Hans sønn Lyon Gardiner Tyler (1853-1935) var i 30 år rektor ved College of William and Mary. Tylers barnebarn, Lyon G. Tyler jr., døde i 2020, 95 år gammel. Hans yngre bror, Harrison Ruffin Tyler (født 1928), var deretter det siste gjenlevende barnebarn av president Tyler. Tyler-familien har siden 1842 eid og bodd Sherwood Forest Plantation, Virginia, som er oppført på National Register of Historic Places som National Historic Landmark.