Det første tempelet ble bygd i år 247, og lå da ved Suzhouelven. Det ble flyttet til sitt nåværende sted, ved Nanjing lu, i 1216 under Song-dynastiet. Tempelet ble nesten helt ødelagt i 1851.