Con el paso del tiempo y las desamortizaciones, los Condes perdieron todos los derechos y privilegios sobre Íscar, quedando las propiedades repartidas entre otros lugareños y terceros herederos.