第三届香港立法会（2004年10月1日至2008年9月30日）.2004年香港立法会选举，他得到工联会支持，自动当选为立法会劳工界议员。为强调劳工界立法会议员身份，渐渐淡出民建联政党活动，并且没有连任民建联中央委员。2007年香港区议会选举，他不再于东区区议会竞逐连任，改为推荐郭伟强参选，并且已迁出该区。2007年10月11日，他在立法会房屋事务委员会中被陈婉娴提名为副主席，石礼谦和议，与泛民的冯检基竞逐副主席一职，结果以6票对6票打成平手，结果在抽签胜出，当选立法会房屋事务