Sélectionné à et buteurs, capitaine de l'équipe d'Algérie, Madjer s'illustre principalement au niveau international lors de la Coupe du monde de 1982 où il marque un but contre l'Allemagne lors d'une victoire , première victoire d'une équipe africaine sur une sélection européenne en phase finale de coupe du monde. Lors de la CAN 1990, Madjer est sacré champion d'Afrique, première victoire de sa sélection dans cette compétition. Il met un terme à sa carrière à la suite de la CAN 1992, où lui et la sélection sont éliminés au premier tour.