至其父石堆于1949年离世，34岁的石鑑辉终于被警务处批准退休，当年其「荣休」消息被香港报章广泛报道。退休后，石鑑辉与原同袍成立中国健身会，闲时则周游列国。至数年后，其妻刘友昆以23万港元现金，购买位于上海街的地铺连阁楼，两年后再以8万港元现金购买位于砵兰街3层高的铺位。1964年，年近半百的石鑑辉在早年购买的九龙旺角砵兰街铺位开办瑞兴麻雀馆，为当年全香港银码交易数量最多及价值最大的麻雀馆，每一铺麻雀可以达几万港元，瑞兴麻雀馆单日抽佣几十万港元，全数均以现金交易。根据麻雀馆的行内人士估计，瑞兴麻雀馆于高