2月，担任党外公职人员公共政策研究会（党外公政会）第一届理事长；同年9月5日，党外公政会举行成立典礼，会址设于台北市青岛东路4号2楼之3，亲自主持成立典礼，林正杰担任该会祕书长，林文郎担任该会财务长。党外公政会成立过程中，独排众议，致函当时中国国民党秘书长蒋彦士，并且主张该会成立时应向主管机关登记；此举使他惨遭党外人士强烈批评，他在党外人士心中的地位暴跌。后来又有福佬沙文主义党外人士私下以「台湾人的团体，怎么由外省人来领导？」批评，令非常不满。1984年10月12日，在立法院第七十四会期第七次会