El objetivo del Marqués de los Vélez era convertir la villa en el centro de sus posesiones almerienses y el castillo en la sede de una pequeña corte señorial, siendo éste un castillo-palacio al estilo de la nobleza castellana de alto rango como el de El Real de Manzanares en Madrid o Cuéllar en Segovia, con cuyos dueños estaba emparentado el marqués tras su segundo matrimonio con Doña Mencía de la Cueva.