På 1000-tallet ble Walsingham valfartssted. I 1061 skal jomfru Maria ha vist seg for adelskvinnen Richeldis de Faverches og vist henne sin bolig i Nasaret. Det fortelles at Maria bød henne å bygge en kopi av huset til ære for Herrens Bebudelse. I 1150 ble det i tillegg til dette valfartsstedet også etablert et augustinerkorherrekloster i Walsingham. Da det ble bygget hadde det hellige huset i Walsingham panel av treverk, og inneholdt en utskåret statue i tømmer av jomfru Maria på tronen, og med jesubarnet på sitt fang. Blant dets relikvier var en liten flaske som det ble hevdet inneholdt jomfruens brystmelk.