For å supplere på sin inntekt fra sin medisinske praksis, hadde Mudd en liten jordlapp der han dyrket tobakk sammen med sine fem slaver som han hadde lov til å ha i henhold til loven US Census Slave fra 1860. Mudd trodde at slaveri var noe guddommelig ordinert som aldri kunne bli forbudt selv om myndighetene i USA forbød det.