据记载，郑和建立的庙宇在1704年的一次山崩中被毁，并于1724年重建完成。重建包括新的洞穴，和原有的洞穴相邻。18世纪中期，犹太裔地主约翰内斯（）取得了三保洞及其附近的土地的所有权，开始向祭祀者收取费用。由于费用过高，华人社团只好每年支付2000荷兰盾来进行祭祀；这一数额后来通过还价降低到了500盾。由于这一数额仍然过高，华人社团转而祭祀供奉于外的大觉寺中的保生大帝雕像，并称之为“小三宝”。其后，当地华人又集资从中国引进了另一尊郑和雕像，并供奉于大觉寺中。1879年，当地的富商黄志信从逝世的犹太裔地主