Kleberstein utgjorde mye av byggematerialet. Like nord for klosteret ligger et gammelt klebersteinsbrudd, og noe kleberstein kan ha vært hentet fra de to gamle bruddene innerst i Vargavågen ved Halhjem.