第一亲家的印象大为反感，连带影响了台湾民众对第一家庭及总统陈水扁的观感。更使总统陈水扁及民进党原本低迷的支持度雪上加霜，党内人士纷纷与扁切割。之后亲民党主席宋楚瑜即要求罢免总统陈水扁，但遭台联批评是为了拉抬宋台北市长选情。国民党方面基层罢免声浪甚高，主席马英九则认为此举会导致民进党“勤王”而採取谨慎态度。2006年5月30日，立法委员丁守中在立法院正式提出总统罢免案，罢免案获得在野党111名立委连署，已经通过罢免案连署门槛。同日晚间，总统陈水扁召开党政高层会议，会中提出「三个决定」（自清、革新、权力下放