સુરતની મુખ્ય જેલ કિલ્લામાં હતી અને કેદીઓને ફાંસી પણ અહી આપવામાં આવતી હતી. ઇ. સ. ૧૭૫૯માં કિલ્લો અંગ્રેજોના અધિકારમાં ગયા પછી બુરજ પર મુઘલોનો ધ્વજ ફરકતો હતો.