Kirkebygget ligger på Klokkeråsen, en høyde 5 kilometer nordøst for Tønsberg sentrum. Noen hundre meter unna ligger Oseberghaugen, en rik skipsgrav fra vikingtida der Osebergskipet ble gravd ut i 1904. Ved oppkjørselen til kirken ligger også Klokkeråsen barneskole, en skole som var i bruk fra 1872 til 2009.