Området ble del av Kappkolonien, og det ble bygget et steinfort kalt i 1799, under den første britiske okkupasjonen av kolonien under Napoleonskrigene. Dette fortet ble bygget for å beste området fra en mulig fransk landgang, og fortet hadde oversikt over stedet som senere ble Port Elizabeth og er nå et monument.