Era hijo del comendador frey Marcelo de Lebrija y de una señora de Villanueva de la Serena llamada María de Torres, y por tanto nieto del gran humanista Antonio de Nebrija.