Tuy nhiên, thời kỳ đầu khi chợ mới được xây dựng, dù đồ sộ, nhưng xung quanh dân cư còn thưa thớt, hơn nữa, các thương gia người Hoa buôn bán tại Chợ Lớn Cũ vốn đã yên nơi yên chỗ cũng không muốn dời phố mới xa xôi thêm hao tốn, vì vậy Chợ Quách Đàm chưa sầm uất như bây giờ.