说：「城下之盟，《春秋》耻之，澶渊之举，是城下之盟也。以万乘之贵而为城下之盟，其何耻如之！」又说：「寇准之孤注也，斯亦危矣。」三年（1006年）二月，因王钦若等人排挤，罢相，进刑部尚书（阶官，正三品）。三月，出知陕州。大中祥符元年（1008年），从封泰山。十一月，迁户部尚书（阶官，正三品）。十二月，知天雄军（差遣）。祀汾阴，命提举贝、德、博、洺、滨、棣巡检捉贼公事。四年（1011年）四月，迁兵部尚书（阶官，正三品）。五年（1012年）五月，为都大提举河北巡检。六年（1013年）十二月，权东京留守。七年（