La posición privilegiada de la familia se vio truncada al llegar al trono el rey Enrique II de Castilla, motivo por el que cayeron en desgracia la mayor parte de los familiares.