W reprezentacji Zambii Tembo zadebiutował w 1995 roku. W 1996 roku zajął z Zambią 3. miejsce w Pucharze Narodów Afryki 1996, na którym zagrał w 6 meczach: z Algierią (0:0), z Burkina Faso (5:1), ze Sierra Leone (4:0), ćwierćfinale z Egiptem (3:1), półfinale z Tunezją (2:4) i o 3. miejsce z Ghaną (1:0).