开始时亦雄心勃勃，诏答：“今铣倡恢复议甚壮，其令铣与诸镇臣悉心上方略，予修边费二十万。”严嵩谗于世宗，谓其不可轻开边事，疏称“铣以好大喜功之心，而为穷兵黩武之举，在廷诸臣皆知其不可，第有所畏，不敢明言”，又贿赂边将仇鸾，让他上书诬告夏言受曾铣的勾结。嘉靖二十七年（1548年）正月，以夏言“事为任意，迹涉强君”的罪名致仕。这时俺答率军南下，侵扰宣化，严嵩乘机谗言，“早先夏言、曾铣提议收复河套，以致激怒俺答”。夏言在通州（今北京市通州区）时，听说曾铣以“结交近侍”的罪名被杀，从车上堕落，痛哭道：“噫！吾死矣