多的痲疯病人，首任天主教澳门教区主教贾耐劳在1568年（当时还未为主教）来澳后就在这里建立了辣撒禄痲疯病院，并附设一所小教堂，名为「圣辣撒禄堂（）」，供奉圣母望德，是为望德圣母堂的前身。由于教堂是专为痲疯病人而设，故人称「疯堂」或「发疯寺」。1576年罗马教廷宣佈在澳门设教区后，圣辣撒禄堂成为了澳门当时的主教座堂（后来主堂才改为圣母圣诞堂），至1886年重建成现在的望德圣母堂。
「唐人庙」与满清禁教.尽管如此，望德堂坊的起源最早祇可追溯到18世纪，当时已有非常多的外国人到澳门定居，