在一家酒馆里，终日饮酒，并用笔在墙壁上写下：“张元吴昊来饮此楼”。巡逻者见到后，知道他们不是夏人，将他们拿下送予元昊。元昊问他们为何触犯其名讳（时元昊尚未改名为曩霄）、为何进入夏境时，二人大声说：“姓尚未理会，乃理会名耶？”（元昊本姓拓跋，其先人曾先后受唐朝皇帝赐姓李和宋朝皇帝赐姓赵，可谓一人多姓）元昊听后非常惊奇，释放了他们，并且委以重任。二人投夏后，其家属被宋羁縻随州的时候，元昊派间谍矫宋朝的诏令释放他们，人未有知者，后乃闻西人临境作乐，迎此二家而去。入夏后颇得信任，元昊称帝建国后不久，即任命张元为中书