些官员以六等定罪，保全了很多人，如因故宰相张说于肃宗有旧恩，其子燕中书令张均得免死。吕諲的严厉为自己招来了多人的鄙视。李岘也因此声誉高于吕諲、崔器。吕諲为河陇判官时，善于看相的金梁凤也在河陇，对他说：“判官的骨相，应该做宰相。吃一大惊怖，就得。”大约干元元年（758年），吕諲至驿站，责让驿长，笞打之。有驿吏是武将，性粗勐，持弓箭突入射吕諲两箭，几乎中其面，吕諲跳墙得免。报知金梁凤，金梁凤说：“这必是要入相了。”
拜相.干元二年（759年）三月，吕諲在武部侍郎任上被授同中书门下平