১৮৫৭ সালের ভারতীয় বিদ্রোহের পরে, স্ট্রেইটস সরকার স্থানীয় ভারতীয় সিপাহীদের মধ্যে বিদ্রোহের ভয়ে মাউন্ট ফ্যাবারকে দুর্গে পরিণত করার সিদ্ধান্ত নেওয়া হয়েছিল। প্রতিরক্ষা কাজ চালানো এবং পাহাড়ের অর্ধেক বন্দুকের জন্য গ্রানাইট এমবেসলেট সংগ্রহে কাজে লাগানো হয়েছিল, তবে মাউন্ট ফ্যাবার কখনও দুর্গ হয়ে ওঠেনি।