944年）三月，卢文进去世。户部侍郎、翰林学士承旨冯延巳诬告卢文进，想没收卢文进的财产和田宅，卢文进诸子被下狱。四年（946年）正月，高越上表反驳，并直指冯延已过错，词气甚厉。当时冯延巳正当权，人们赞赏高越的勇气。结果元宗怒了，将高越交执法官吏处置，贬为蕲州司士参军，但冯延巳的弹劾也被搁置，卢家得以保全。后来江文蔚也举高越为卢家辩护事弹劾冯延巳之恶。高越迁军事判官，与隐士陈曙结交，淡泊荣利。久后，移广陵令，判吏部铨（选官），曾任侍御史知杂，任上曾奏改通事舍人班位，后被博士陈致雍质疑“使通事舍人以卑处尊之