Esto dio origen a unos años de prosperidad del municipio, llegando a pasar hasta cinco obispos por la residencia denominada "La Casona", mandada construir por Gutierre de Cárdenas y que aún existente en la actualidad, así como diversas personalidades influyentes, como el corregidor de Almería Luis de Guzmán o mercaderes como Diego Pareja y Luis de Jaén.