在的香港会所大厦在1984年落成启用，楼高22层，设有8层会所设施，7至22楼为办公室，由置地公司代为发展，澳洲籍建筑师（Harry Seidler）设计。
日治时期.在香港日治时期，香港会所曾经改作为日本俱乐部。 而对开的和平纪念碑改为日本俱乐部广场。
积极参与赛马活动.由1970年代中期至今，香港会以团体名义在香港赛马会拥有名下马匹，包括博爱、瑞星郡、生霸、江湖客、会所勇士、会所精神、会所之音、会所之王、强者、勇者、皇者、成者、劲者、迅者、智者、善者