Kempe pelasi alle 20-vuotiaiden MM-kilpailuissa vuosina 2015 ja 2016. Hän oli ensimmäisessä turnauksessa neljällä osumallaan Ruotsin paras maalintekijä Oskar Lindblomin ja Lucas Wallmarkin kanssa. Vuoden 2016 turnauksessa Kempe valittiin joukkueensa top-3-pelaajaksi.