希亮上奏反对：“宋朝和辽、金攻战已三百年，现在刚刚太平，人民须要休息。过几年之后，俟数年，再兴师不晚。”世祖认同。至元十四年（1279年），转嘉议大夫、礼部尚书，不久升任吏部尚书。至元十七年（1282年），耶律希亮告病辞官归田，退居总阳二十余年。至大二年（1309年），元武宗访求先朝旧臣，耶律希亮复出，出任翰林学士承旨、资善大夫，后出任翰林学士承旨、知制诰兼修国史。泰定四年（1327年）耶律希亮逝世，享年八十一。