Etter prins Fredrik Ludvigs død ble Bute en nær venn av hans enke, Augusta av Sachsen-Coburg-Gotha, enkeprinsessen av Wales. Det var rykter om at de to hadde en affære sammen, og kort tid etter utga John Horne (assosiert med prinsen av Wales) en skandaløs pamflett som hentydet om et forhold mellom Bute og prinsessen. Disse ryktene var ganske sikkert ikke riktige da Bute var lykkelig gift, og hadde alvorlige religiøse motforestillinger på utroskap. Som en utenlandsk kvinne fikk Augusta et offentlig omdømme hun ikke hadde fortjent. Hennes avhengighet av lord Bute fikk henne til å mistro offentligheten og pressen som framstilte henne med satirisk ondskapsfullhet. Ved at hun ikke var villig til avslutte vennskapet med ham, bidro til at offentligheten mislikte henne ytterligere og som antagelig framskyndet hennes død.