De 1845 à 1849, l'Irlande souffre de la grande famine. Les domaines irlandais de Lord Dillon se situent dans certaines des zones les plus touchées. Bien qu'il vive en Angleterre et qu'il soit propriétaire absent en Irlande, lui et son directeur immobilier Charles Strickland, qui vit à Loughglinn, semblent avoir été humains et semblent avoir aidé les locataires plutôt que de les expulser. Un grand vitrail dans le baptistère de la cathédrale de l'Annonciation à Ballaghaderreen, dans le comté de Roscommon, commémore Lord Dillon pour son équité en tant que propriétaire pendant la grande famine. Cette fenêtre a été offerte par sa femme . Un autre vitrail dans une chapelle du côté sud de la cathédrale commémore son agent Charles Strickland .