Sus padres fueron Alfonso de Ávila, de ascendencia judía, y Catalina Xixón o Gijón, hidalga y posiblemente emparentada con otro gran ascético nacido en Almodóvar, Juan Bautista de la Concepción.