香港开埠初期并无工会组织，那些聚集在香港中上环一带工作的低下层劳工，多数为四邑人士，由12个工人头目组织起来，在和记客栈成立的工人自助帮会，12人选出第一任首领赖忠，绰号「盲忠」（人称「歪嘴皇帝」）。此外，相传和合图曾支持过辛亥革命。至1909年端午节，广东洪门天宝心派遣勇义堂头目「黑骨红」 （另一说为「黑骨仁」）来香港开新堂，他来香港后，眼见为香港各小堂口四分五裂，于是提议聚合各帮人马，并传授洪门的组织及帮规，并协议和平共存。为确立「以和为贵」精神，大家提出在各堂口的名称上，再一律加上「和」字，形成