Okumu es internacional con la selección de fútbol de Kenia, con la que debutó el 23 de junio de 2019, en un partido de la Copa África 2019 ante la selección de fútbol de Argelia, que terminó con derrota por 2-0 para los keniatas.