Mannar er også kjent for sine baobabtrær og for et fort som ble bygget av portugiserne i 1560 og tatt av nederlenderne i 1658 og forsterket; kanonstillingene og bastionene er intakte, mens fortets indre for det meste er rasert. Tidligere var byen kjent for sitt perlefiske, nevnt i dokumentet Periplus Maris Erythraei fra det 2. århundre e.Kr. Det er en moderne by som domineres visuelt av hindutempler, moskeer og kirker.. Et av Den katolske kirkes bispedømmer har sitt hovedsete her. Byen har jernbaneforbindelse med resten av Sri Lanka med Mannar Line. Byen var okkupert av Tamiltigrene under borgerkrigen på Sri Lanka mellom 1983 og 2009.