અનેક બ્રિટિશ ઇતિહાસકારોએ લખ્યું છે કે વર્ષ 1855માં નવાબી શાસન વખતે મુસ્લિમો બાબરી મસ્જિદમાં એકઠા થયા હતા અને થોડા મિટર દૂર આવેલા અયોધ્યાના સૌથી પ્રતિષ્ઠિત હનુમાનગઢી મંદિર પર કબજો કરવા માટે આક્રમણ કર્યું હતું.