Construido entre 1675 y 1690, en él habitó Pedro de Alcántara Téllez-Girón y Pimentel, hijo del IX duque de Osuna (Pedro de Alcántara Téllez-Girón y Pacheco), II príncipe de Anglona, IX marqués de Jabalquinto, prócer del Reino y senador vitalicio, pasando más tarde a manos de los Duques de Benavente.