Acoge en la actualidad las dependencias de la Cofradía de Nuestra Señora de Peñarroya, de Argamasilla de Alba, aunque antiguamente, es de suponer que constituiría las dependencias del señor del castillo o alcaide de la fortaleza.