Durante gran parte del siglo XX el Jardín pasó un grave período de degradación, siendo una zona de prostitución y tráfico de drogas.