En 1960 el arquitecto Ignacio Álvarez Castelao, en su proyecto de adaptación del edificio para Delegación de Hacienda, manda tirar algunas partes históricas del inmueble, entre las que se cuenta la crujía del lado este del claustro.