Værne kloster var også et pilegrimsmål på katolsk tid. Historien forteller blant annet at en bonde fra Telemark i 1458 ble pålagt å dra på pilegrimsreise til Værne, Vadstena og til Nidaros.