El edificio perteneció a la Diputación de Los Doce Linajes de Soria cuyos nombres eran: Calatañazor, Barnuevos, San Llorente, Velas o Don Vela, Chancilleres (1ª casa), Cancilleres (2ª casa), Santa Cruz, San Esteban o Santisteban, Morales blancos o someros, Morales negro u hondoneros, Salvadores blancos y Salvadores negros.