En 1476, los seguidores de Juana la Beltraneja fueron sitiados en el edificio, en el contexto de las disputas por el control del trono de Castilla con Isabel la Católica.