书李岘同为详理使，与崔器等官员一同负责处置陷燕罪臣。吕諲和崔器严厉，上言都应处死，肃宗几乎同意，而李岘比他们识大体，也较为仁慈，争执称“諲、器守文，不达大体”。最终肃宗从李岘议，对这些官员以六等定罪，保全了很多人，如因故宰相张说于肃宗有旧恩，其子燕中书令张均得免死。吕諲的严厉为自己招来了多人的鄙视。李岘也因此声誉高于吕諲、崔器。吕諲为河陇判官时，善于看相的金梁凤也在河陇，对他说：“判官的骨相，应该做宰相。吃一大惊怖，就得。”大约干元元年（758年），吕諲至驿站，责让驿长，笞打之。有驿吏是武将，性粗勐，持