月丙辰（575年3月28日），元伟与副手纳言伊娄谦回访北齐，窥伺机会以便行动。这年秋天，周武帝宇文邕亲自率军东征，元伟因此被北齐扣押。建德六年（577年），北齐被平定，元伟才被释放。周武帝因为元伟被长时间囚禁，加授他上开府。大象二年（580年），元伟出任襄州刺史，进位大将军。元伟个性温柔，喜欢清静，居家不置办产业，笃志学习爱好文学，政事闲暇未曾放弃读书，又谨慎小心，与人无争，当时的人因此称赞他。当初元伟从邺城归还，庾信赠送诗歌说：“虢亡垂棘反，齐平宝鼎归。”元伟为文学之士的敬重就是如此。元伟后来因为疾病