后朝廷加元修义平西将军，征召回朝担任太常卿。元修义又升任安南将军、都官尚书，转任殿中尚书，升任镇东将军、吏部尚书，军号转为卫大将军，加散骑常侍。等到元修义在吏部掌管官吏的任免，专心受贿，授予官职的大小都有固定价钱。当时中散大夫高居得到旨意优先任用，正好上党郡有空缺的官职，高居于是请求。元修义私下已经许诺给别人，抑制高居不给他。高居大声议论没有礼节，元修义命令左右牵住他。高居对着众人大声唿喊有贼。人们问高居说：“白天在公堂上，怎么会有贼？”高居指着元修义说：“这个座位上的人，违反天子英明的诏示，财物多的得到官