政策上受到极大掣肘，加上与内阁中官员多次意见不合，鲍威尔在2004年12月14日宣布辞去美国国务卿职务，并即时得到总统布什接受，2005年1月正式离任。2008年美国总统选举及2012年美国总统选举，他两次表态支持民主党的巴拉克·欧巴马。2016年美国总统选举，他表态支持民主党的希拉里·克林顿，并表示「因为我认为她够格，而『另一位先生』则不够格。」然而他在2014年的电邮中写道：「我希望不用投她一票，虽然她是我尊敬的朋友。一名快70岁的人，有着长长的纪录、恣意的野心（unbridled ambiton