Ekteparet Tyler bodde i Philadelphia i 16 år. Robert jobbet som sakfører og var aktiv i Det demokratiske partiet. Da den amerikanske borgerkrigen brøt ut i 1861, erklærte Robert og Priscilla lojalitet til konføderasjonen. De flyttet til Richmond, hvor Robert tok jobb ved konføderasjonens finansdepartement.