Desde su fundación fue casa consistorial y albergue de los confesores que administraban penitencia a los peregrinos, y cárcel municipal (en los bajos de la parte posterior).