I tidligere århundre var Bantry en base for store fiskerier av sardin og ble besøkt av fiskeflåter fra Spania, Frankrike og Nederland. Den var fortsatt en meget liten by i 1689 da den ble beskrevet av den jakobittiske hæroffiseren og framtidige forfatteren John Stevens (1689) som «et elendig fattig sted, neppe verdt navnet på en by», bestående av «sju eller åtte små hus, og noen mener små hytter». Bantry var stedet hvor den jakobittiske hæren gjorde landgang for deretter marsjerte gjennom Cork og delta i slagene ved Boyne og Aughrim, og beleiringen av Limerick.