Después de su destierro del béisbol profesional, Joe y su esposa Kate se movieron a Savannah en 1922 donde ellos fueron propietarios de un negocio de lavandería al seco.