Tollmuren mistet sin funksjon da særavgiften ble opphevet i 1860, og i løpet av slutten av 1860-årene ble de gjenværende murrestene revet.