使、岳州（今属湖南，时属湖南割据的武平节度使）防御使，转为武信（遂州，今四川遂宁，时属后蜀）节度使、步军都指挥使。建隆元年（960年）五月，宋太祖为直接掌握侍卫亲军司的兵权，在平定潞州李筠之后，赵彦徽与张光翰首先被罢军职，解除他们的兵权，赵彦徽的军职为罗彦瓌所接替，张光翰为韩重赟接替。赵彦徽改为建雄军（晋州，今山西临汾）节度使。干德元年（963年）十二月，宋太祖遣内容省使曹彬、通事舍人王继筠分诣晋州、潞州，与节度使赵彦徽、李继勋会兵入北汉境，攻其边邑及辽州、石州。赵彦徽在晋州不恤民事，专务聚敛，私帑所藏