当时张尚未决定是否于2004年中华民国总统大选支持连宋，不过最后张选择替连宋辅选。尽管如此，在2004年中华民国总统大选中，陈水扁仍然在云林县拿下六成余的票数。在2004年中华民国立法委员选举前一日，张荣味被捕入狱，而以无党籍的身分参选立委的张荣味胞妹张丽善则高票当选。此外，民进党在云林县的政党得票率依旧保持领先，并拿下两席立委；而国民党亦获得两席立委，其余一席则由同属泛绿的台联取得。由于张荣味被判入狱三个月以上，内政部将其停职，并指派前基隆市长李进勇代县长。2005年中华民国县市长暨县市议员选举时，国