પછીથી રાજાએ ત્યાં જાસૂસી કે રાજકિય ગરબડ ઊભી કરતાં પકડાયા હોય એવા કેદીઓને રાખવા માંડયા અને એમ કરતાં એ કિલ્લો જેલખાનું બની ગયો.