吉尼亚州的华腾（Walden），华盛顿9至16岁时住过的查尔斯敦上游8米的可诺瓦河谷镇。1882年夏天，华盛顿跟史密斯结婚了。他们有一个孩子，名叫波提亚·M·华盛顿。凡妮死于1884年5月。他接着在1885年与奥莉维亚·A·戴维生结婚。戴维生出生于俄亥俄州，任教于密西西比州和田纳西州，于汉普顿学院和在麻萨诸塞州泛明翰的泛明翰州立大学接受教育。华盛顿在塔斯基吉遇到戴维生，即是她来任教的地方。后来她成为了那里的副校长。他们有两个儿子，小布克·T·华盛顿和欧尼斯特·戴维生·华盛顿，她后来于1889年死去。