Vào năm 1790, trong quá trình bôn tẩu tránh quân Tây Sơn, Nguyễn Ánh đã từng tá túc tại chùa Từ Ân. Chùa Khải Tường là nơi trú ngụ của các cung phi. Năm 1791, Nhị phi Trần Thị Đang (tức Thuận Thiên Cao Hoàng hậu) hạ sinh hoàng tử Nguyễn Phúc Đảm nơi hậu liêu chùa Khải Tường. Sau này khi lên ngôi hoàng đế (lấy niên hiệu Minh Mạng), nhớ đến nơi mình sinh ra nên vua đã truyền lệnh cho quan quân đến thành Gia Định, tìm lại dấu vết.