岳飛在收到十二道金牌班師回朝之時自稱「十年之力，廢於一旦」。岳飛回到京城之後，向高宗請辭。高宗當時沒有答應他的辭呈。次年四月，拜樞密副使。但是這次，岳飛請求拿回兵權，未得允許。紹興十一年右諫議大夫万俟上書指控岳飛「爵高祿厚，志滿意得，平昔功名之念，日以頹情。……而乃稽違詔旨，不以時發……伏望免飛副樞職事，出之於外，以伸邦憲」，接著御史中丞何鑄和殿中侍御使羅汝楫等亦相繼彈劾。八月甲戌，罷岳飛之職務。此後岳飛閑居廬山。九月八日，岳家軍鄂州前軍副統制王俊向王貴告發岳飛在廬山曾致信鄂州張憲、岳雲，要求張憲起兵造反，以迫朝廷恢復岳飛軍職。十月，岳飛、岳雲父子被逮捕，命御史中丞何鑄、大理寺卿周三畏審訊。紹興十一年十二月二十九日刑部大理寺發布《刑部大理寺狀》，認定岳飛「坐觀勝負，逗留不進」、「指斥乘輿」、「致張憲意待謀反」等罪名成立，「飛獄成，寺官聚斷，咸謂死有餘罪」。大理寺按律：「臨軍征討，稽期三日者，斬。」一般史家皆同意岳飛的死是件從頭到尾都是件冤案。
岳飛發生何事，導致其自稱「十年之力，廢於一旦」?