A la muerte del barón, el edificio fue legado al Hospital de la Santa Cruz, quien lo alquiló a diferentes inquilinos hasta que lo vendió a la familia Ríos.