El edificio fue un palacio en tiempos de Juan II de Castilla.