李德裕辅政时，出京为汾州刺史，再以不孝之罪绌免，改汾州司马。大和九年（835年）八月，与杨虞卿、萧瀚皆再贬。皇帝甚至下令二十年内不得用。但不久改绛州（今山西新绛）刺史。大中（847年－859年）年间，召拜宗正少卿，卒于任上。当李汉为中丞，表亲孔温业为御史，等李汉晚见召，孔温业已为中丞，每燕集，人以为荣。