এর পরপরই সিনাগগ নির্মাণের অনুমতি প্রত্যাহার করা হয় এবং আংশিকভাবে সম্পন্ন ভবনটি ধ্বংস হয়ে যায়; শুধুমাত্র ১৮৬৪ সালে এটি শেষ হয়।
নির্মাণ কাজ শুরু হওয়ার মাত্র এক বছর পর, সমাজগৃহের নির্মাণ কাজ ত্বরান্বিত ও সম্পন্ন হয়েছিল।