Da fabrikken imidlertid skulle nedlegges, ble det verre. Carey flyttet derfor i 1800 til den danske kolonien Serampore, hvortil det noe tidligere var kommet noen andre misjonærer som Det britiske østindiakompani hadde bortvist fra sine områder i India. Samme år døpte Carey sin første tidligere hindu.