El Palacio Nuevo, conocido asimismo como Palacio de los Álvarez de Toledo, muy airoso y destacado por su situación al norte de la meseta que ocupa la población, fue construido por los condes de Oropesa, en etapas, hacia el año 1402.