Hijo de sirvientes negros pertenecientes al cuarto conde de Cabra, Luis Fernández de Córdoba y a la II duquesa de Sessa, Elvira Fernández de Córdoba, marchó a Granada y fue educado e instruido allí en las artes liberales junto a Gonzalo, hijo de su señor y nieto de otro famoso Gonzalo, el Gran Capitán.