Poco después el edificio se cedió para escuelas públicas y luego fue ocupado por las dependencias municipales, que se trasladaron desde el viejo palacio de la Plaza Chica (que actualmente, pero por poco tiempo ya, es Palacio de Justicia de Zafra) en 1881, tras ser sometido el edificio a amplias reformas que le iban a prestar una nueva fisonomía pero que destruyeron muchos elementos de su antigua fábrica.