子洗马刘讷言、洛州司户格希玄、学士许叔牙、成玄一、史藏诸、周宝宁等作为当时学者都是李贤注《后汉书》的主要工作者。恒州司法参军苏瑰为丧母而哀痛伤身，张大安表举其孝悌，使其得擢相王府录事参军。永隆元年（680年），已失宠于唐高宗有权势的妻子武皇后（即后来的武则天）的李贤被控谋反，被废黜贬谪。他的大多数幕僚都被赦免，但刘讷言被流放振州，八月张大安也以阿附原太子的罪名贬普州刺史。永淳二年（682年）五月仍在任，去严州题名。他于光宅元年（684年）去世于横州司马任上。