En 1887 el pueblo vende el castillo al sexto Conde de Asalto, pariente lejano de los Ayala, de quien lo hereda su hijo, el marqués de Argüeso, diputado a Cortes por Tarragona.