者会基于当时的政治风险，不敢贸然购入。
李宝椿大厦.1961年记者会搬迁到上环李宝椿大厦。高潮过后，一切归于平淡，记者会开始历史中的黑暗时期。辞职司空见惯，记者会终于在1963年破产，有几个月遭清盘而关闭。但有数名忠心会员在希尔顿酒店4楼租用一间会议室继续会务。会员数目日减，记者会直到1964年末才收支平衡。
希尔顿酒店.记者会其后迁往希尔顿酒店顶楼（而本会旧址已经和政府新闻处旧址及停车场一併重建成长江集团大厦），会所拥有无敌维港景色，夏天更在游泳池傍边租