他说：“畜牲互相角斗，自属常理，这不关人事，你何必谢罪？”就拒绝了牛主人的赔偿。卢昌衡个性宽厚不计较，都如此类事。卢昌衡后转任寿州总管长史，总管宇文述非常尊敬卢昌衡，将州中事务委托给他。一年多以后，卢昌衡升任金州刺史。仁寿年间，卢昌衡奉诏命持节担任河南道巡省大使，回朝后，因为奉命出使符合皇帝心意，被授任仪同三司，被赐布帛三百段。卢昌衡自认为年近七十，上表请求退休，朝廷下诏褒扬，不允许卢昌衡退休。大业初年，卢昌衡被征召担任太子左庶子，卢昌衡前往洛阳，在途中去世，虚岁七十二。