辩论，臣不如您。保全国家，安定刘家后人，您不如臣。」王陵无言以对。事后，吕太后假意提升王陵为太傅，实际上拔除其权，明升暗贬。王陵生气，称病辞职。王陵被免除丞相职务后，吕太后就调任陈平为右丞相，任命辟阳侯审食其为左丞相。吕后八年（前180年）王陵去世。谥号武侯。哀侯王忌继位安国侯。安国侯传至王陵玄孙因酎金事件断絶。
轶事.秦末时，秦国御史张苍追随刘邦，但不久即因触犯军法，被判斩首，适逢王陵路过，见张苍高大、白皙而俊美，向刘邦请求赦免其罪。张苍认为王陵是救命恩人，奉王陵如父，数十年