Era un edificio del siglo XVII, aunque hasta finales del XIX no fue residencia del obispo.