En 1930, Ponsonby est élevé à la Pairieen tant que baron héréditaire, prenant le titre de Lord Ponsonby de Shulbrede de sa maison au Shulbrede Priory dans le Sussex. Il est chef du Parti travailliste à la Chambre des lords de 1931 à 1935, démissionnant parce qu'il est opposé au soutien du parti aux sanctions contre l'Italie pour son invasion de l'Abyssinie.