Navnet på kirken vitner om at den lå på en handelsplass, en kaupang, der en bymessig bebyggelse vokste fram i middelalderen. Kaupangen lå trolig ved stranden nedenfor Kaupanger hovedgård og den omtales i Sverres saga årene 1183-1184. Før 1660 er lite skriftlige kilder om kirken.