入学指定科目考试考生权益，严重影响该党在中南部选票；杜正胜回应，「在我的责任范围之内，我尽了我的力量，另外的是我个人的生活」。2004年8月31日，何金松透过无党团结联盟办公室对外表示，他将在明天宣布加入无党团结联盟；同日，民进党立法院党团总召集人柯建铭证实，他在该日下午突然收到何金松的传真表示退出民进党立法院党团运作，不过他一整个下午都无法连络上何金松，尚无法得知何金松为何退党。 2004年9月1日，何金松、蔡豪、林炳坤与郑余镇在无党团结联盟立法院党团召开记者会，宣布加入无党团结联盟立法院党团运作