Con el paso de los años, el palacio sufrió algunas modificaciones siendo las más significativas las realizadas después de su adquisición por parte de la familia Centeno, a finales del siglo XIX, de donde heredó el nombre por el cual es hoy conocido.