亚州的奥兰治县由他外祖父拥有的野兔林场，泰勒父母均受过良好教育。父亲理查德·泰勒在美国独立战争时曾任中校。泰勒是威廉·布鲁斯特的后裔，一位普利茅斯殖民地的清教徒殖民主义领导者，一位五月花移民与五月花号公约的签署人之一。而泰勒的第二个表哥是第四任总统詹姆斯·麦迪逊。
婚姻和家庭.泰勒的妻子玛格丽特·麦克尔·史密斯也生长于边区。他们在肯塔基边区结识。两人于1810 年在泰勒父亲赠送的农庄上结婚。从此，玛格丽特开始了东奔西走的随军生活，直到1841 年才在地方上定居下来，两人有六个孩子。