Rosson var gift og skilt to ganger og hadde ingen barn. Skuespillerinnen Jean Harlow fridde til ham under innspillingen av filmen i 1933. De to hadde tidligere jobbet sammen med , og , og hadde blitt venner. Rosson og Harlow giftet seg 18. september 1933 i Yuma i Arizona. I et intervju med Leicester Wagner fortalte Harlow at hun og Rosson fikk et tettere forhold etter dødsfallet til hennes andre ektemann, Paul Bern, og han oppfordret henne til å være sosial. Rosson og Harlow ble separert i mai 1934, og Harlow anklaget Rosson for å være «frekk, mutt og irritabel». Hun fikk innvilget skilsmisse i mars 1935.