Parken ble beskåret både da Palékaia ble anlagt i 1852, og ved flere senere utvidelser av Strandgata, blant annet da Havnebanen kom i Strandgata i 1907. Også den nye Tollboden tok en bit av hagen fra syd da den ble bygget i 1896. Resten av haven (2,6 mål) ble rehabilitert av kommunen i 1897.