Vào năm 1894, hai nhà máy nước đã được xây dựng: Một ở phía Yên Phụ chuyên cũng cấp cho khu Thành cổ - lúc này là nơi tập trung quan chức và binh lính người Âu cùng với khu dân cư "36 phố phường"; một nhà máy nữa ở Đồn Thủy - lúc này đã được chuyển thành bệnh viện và một vài công sở của người Âu từ vùng đất nhượng địa lan dần ra phía Tràng Tiền và quanh Hồ Gươm.
Vì thế, ngoài Tháp nước Hàng Đậu còn có tháp Đồn Thủy, nhưng hiện tại nằm sâu ở cuối phố Đinh Công Tráng, ít người biết đến.