不久转工科，杨博改任吏部尚书后就利用职权将其外调云南布政司左参议。隆庆三年（1569年）升为江西按察副使，万历五年（1577年）升为南京右佥都御史，上疏要求内阁首辅张居正按制度回家守丧，触怒了张，遭弹劾免职。张居正死后，张岳重获启用，历四川左参议、南赣巡抚、左佥都御史、左副都御史，刑部右侍郎等职，万历十三年（1585年）又因议论内阁首辅申时行等人再遭免职，五年后去世，终年五十六岁。
家庭.次子张集义，万历十四年（1586年）进士，官至工部郎中。