Antonio nació fruto de la relación del infante Luis de Portugal, duque de Beja, con la judía Violante Gómez, que murió siendo monja.