Manuel era el quinto hijo de Juan III el Piadoso y de la archiduquesa Catalina de Austria, infanta de España, siendo nieto por vía paterna de Manuel I el Afortunado y de la infanta María de Aragón, y por vía materna de Felipe I de Castilla y de Juana I la Loca.