Sa famille quitte l’Égypte en 1957 pour la Belgique puis la France après l'affaire du canal de Suez mais son frère aîné Eddy Lévy reste en Égypte. Militant politique, ce dernier se convertit à l'islam et prend le nom de Adel Rifaat. Il rejoindra la France dans les années 80 et formera avec Bahgat Elnadi le binôme de politologues et d'islamologues connu sous le pseudonyme de Mahmoud Hussein. Son autre frère est le militant, philosophe et écrivain Benny Lévy. Comme son frère cadet Benny, Tony est un militant d'extrême gauche dans les années 1960 et 1970.