In 1841, while still at school, he succeeded his father as Baron Dufferin and Claneboye in the Peerage of Ireland and in 1849 was appointed a Lord-in-Waiting to Queen Victoria.
В 1841 от своего отца по наследству он получил титул 5-го барона Дафферина-Кландебоя ирландского пэрства, а в 1849 был назначен "камергером" королевы Виктории.