W reprezentacji Zambii Milanzi zadebiutował w 1996 roku. W 2002 roku w Pucharze Narodów Afryki 2002 w Mali wystąpił we 2 spotkaniach: z Senegalem (0:1) i z Egiptem (1:2). W 2006 roku podczas Pucharu Narodów Afryki 2006 był rezerwowym i nie rozegrał żadnego spotkania.