ફોર્ટ નેગોમો પોર્ટુગીઝો દ્વારા બાંધવામાં આવ્યું હતું, પરંતુ બાદમાં તે ડચ દ્વારા કબજે કરવામાં આવ્યું હતું બ્રિટિશ શાસન દરમિયાન, આ કિલ્લો જેલમાં તરીકે ઉપયોગ કરવામાં આવ્યો હતો.