ધ્રોલ શહેરના કુંવર ભીમાજીના હાથે આ કિલ્લાનું નિર્માણ થયું એમણે આ કિલ્લાનું નિર્માણ કર્યા બાદ તે ખીરસરાના કિલ્લાને પેલેસ બનાવ્યો ઠાકુર રણમલજીએ તેમણે સિંઘના સૂફી ફકીર નાલેસફેરના આશિર્વાદથી ૩૦૦ કારીગરો સાથે એક ભવ્ય પેલેસનું નિર્માણ કર્યુ.