ต่อมารัฐบาลได้เริ่มสร้างสะพานพระพุทธยอดฟ้าและตัดถนนเชื่อมตลาดพลูและประตูน้ำภาษีเจริญซึ่งเป็นเส้นทางเดียวกับที่พระยาภิรมย์ภักดีมีกิจการเดินเรืออยู่