Tras la muerte de los marqueses de Linares, el palacio fue heredado por Raimunda Avecilla y Aguado, condesa de Villapadierna, ahijada de los marqueses e hija de su administrador, Federico Avecilla Delgado.