En 1402 esta rama del linaje de los Álvarez de Toledo construyó el Palacio Nuevo o Palacio de los Álvarez de Toledo que, a partir de 1475, fue el centro del poder del Condado de Oropesa.