乐率两千骑叛投占据幽州作乱的葛荣余部韩楼，封北平王。尔朱荣遣大都督侯深攻打韩楼，彭乐又叛韩楼而投降侯深。
效力高欢.普泰元年（531年）二月，时任晋州刺史的高欢出兵山东，彭乐随从。六月，从侧面马上擒杀出城劳军的殷州刺史尔朱羽生。中兴二年（532年）闰三月，尔朱荣从子并州刺史尔朱兆发兵袭击时任丞相、柱国大将军、太师的高欢，史称韩陵之战，彭乐先登陷阵，敌军大溃，彭乐封乐城县公。后以军功，进爵汨阳郡公，除授肆州刺史。尔朱氏旧将卢曹有勇力，但不愿为高欢所用，逃奔海岛，得到长人的骨头，将