Manners ble utdannet ved Eton og ved Trinity College i Oxford. Siden han ikke levde lenger enn sin far, var han kjent under tilleggstittelen til faren, markien av Granby.