墓扩大，以符合社会各界的需要，由香港唯一的犹太港督弥敦爵士和嘉道理家族建造的犹太人俱乐部于1904年创建并在1909年扩大。在1882年，香港有60个犹太人，在1921年增长到100人（主要是塞法丁犹太人），在1954年增长至250人（塞法丁和阿什肯纳兹犹太人各佔一半）。之后增长放缓，1959年人口只有230人，1968年人口达到200人。何福和何东的生父是荷兰的犹太人。香港的犹太人社区并没有快速增长，大多数犹太商人被吸引到上海，特别是在1910年至1936年期间。然而，在二十世纪三十年代，日本对中