Wolfe Tone Square i byen minnes Theobald Wolfe Tone, en leder under det irske opprøret i 1798. I forkant av opprøret, ledet Dublin-fødte Tone de republikanske United Irishmen i det han hadde håpet ville være en lokal gjenoppføring av den nylige franske revolusjonen; dette skulle oppnås ved hjelp av franske republikanere i å styrte det britisk styret av Irland. Den skjebnesvangre franske invasjonsflåten, kjent som den franske ekspedisjonen til Irland, ankom området i 1796, men formålet ble frustrert av ugunstige vinder. For sin innsats med å forberede det lokale forsvaret mot franskmennene, ble Richard White, en lokal grunneier, opprettet baroniet Bantry i 1797 av en takknemlig britisk administrasjon. Han ble framhevet til vicomte i 1800 og i 1816 ble han den første jarlen av Bantry. Herskapshuset og hagene i Bantry House demesne i utkanten av byen vitner om familiens status.