Sin embargo, el consistorio se trasladaría desde el antiguo cabildo, que estaba en un lugar conocido como Corral de los Olmos, al actual emplazamiento, en el siglo XVI, buscando un edificio más grande y mejor dada la importancia que había tomado la ciudad en el Siglo de Oro.