六年（738年），贬饶州刺史。以太子左庶子征，复为户部侍郎。天宝九载（750年），官至刑部尚书。自认以才能当为宰辅，受李林甫排挤。李林甫死后，依附陈希烈，又受杨国忠厌恶。陈希烈失势，张均仍为大理卿。天宝十三年，张垍因故惹怒唐玄宗，受此牵连，张均出为建安郡太守。年中即召还，再迁太常卿。755年，安史之乱爆发，玄宗仓皇出奔，张均、张垍兄弟未随从。当玄宗出逃至咸阳时，与高力士议论在京官员中何人会跟随而来。高力士认为：张垍兄弟世受国恩，又是皇亲国戚，必当先至。而房琯素有宰相望，为安禄山所器重，必不来此。玄宗则认