Ekteskapet til Sue og Phillotson blir aldri noen suksess, fordi hun nekter å gi seg selv seksuelt eller romantisk til mannen sin. Hun forlater snart Phillotson for å være sammen med Jude i det som viser seg å være en vanskelig tilværelse, og hele tiden flytte fra sted til sted for at Jude kan finne sporadisk og tilfeldig arbeid som steinhugger. Jude får vite at Arabella fødte en sønn, som hun kalte Juey, like etter at hun forlot Jude.