Pilegrimsleden fra Oslo til Nidaros gikk gjennom Hammer. Kirken var en naturlig stopp på veien. Olavskilden som ligger på toppen av Hammersberget ble oppsøkt av pilegrimene som søkte lykke og helse i den sagnomsuste kilden. Et sagn sier at guden Tor kastet hammeren etter kirken under byggingen, men bommet, og traff berget bak slik at kilden sprang frem.