Hunt giftet seg to ganger. Etter et mislykket forhold til sin modell Annie Miller giftet han seg med Fanny Waugh som senere poserte for bildet «Isabella». Da hun døde i barsel i Italia skulpturerte han hennes gravstein på den engelske kirkegården i Fiesole i den italienske regionen Toscana. Hustruen har gravstedet ved siden av Elizabeth Barrett Browning.