Joseph Dickson giftet seg i Pennsylvania i 1798 med en irsk kvinne ved navn Susan. Samme år flyttet de til Tennessee der deres to eldste barn ble født. De fikk ni barn. I 1802 flyttet de til Cahokia i Illinois. Familiefaren livnærte seg der på tømmerhugging og pelsfangst.