06年退休，并在同年9月15日获选为房协主席，现任渣打顾问。杨家声拥有超过十年不同范畴的公共和社区服务经验，包括社会福利服务，有公职王的外号。他是社会福利署工商机构义务工作推广小组的前召集人，亦曾作为康复谘询委员会及妇女事务委员会的成员。现时亦是香港城市大学校董会的成员。2005年，杨家声获香港特区政府颁授银紫荆星章；2012年，杨家声获香港特区政府颁授金紫荆星章。