大业末年战争兴起，诸儒废学。唐朝建立，张士衡在乡里教学。贞观年间，幽州都督、燕王李灵夔准备玄纁束帛之礼，聘到家中，拜为师。李承干在东宫，听说后，聘来京城。张士衡到洛阳宫谒见唐太宗，太宗在殿上赐他进餐，擢授朝散大夫、崇贤馆学士。李承干问北齐灭亡的原因，张士衡回答：“北齐后主悖虐无度，昵近小人。至如高阿那肱、穆提婆、韩长鸾等，皆奴仆下才，凶险无赖，是信是使，以为心腹。诛害忠良，疏忌骨肉。穷极奢靡，剥丧黎元。所以周师临郊，人莫为用，以至覆灭，实此之由。”李承干又问：“佛教布施求功德