部人。耶律世良才思敏捷，熟悉契丹典故和世谱，曾上书与族弟耶律敌烈争嫡庶，被辽圣宗所知。辽圣宗时，为北院郎君。统和二十九年（1011年）三月，受大丞相韩德让举荐，任北院大王。开泰元年（1012年）十一月，因大册礼，加检校太尉、同政事门下平章事。当时西北阻卜（鞑靼、达旦）反辽，开泰二年（1013年），阻卜兵围镇州，为都监，随北院枢密使耶律化哥讨平西北阻卜，击败达旦酋长乌八。耶律化哥想要还军，他上书请增兵进讨，辽圣宗纳其益兵之谏，耶律世良与耶律化哥率兵追至安真河，获胜而还。自是，边境安宁。以功封岐王、拜北院枢