Seit 2012 spielt Mbemba für die kongolesische A-Nationalmannschaft und nahm mit ihr am Afrika-Cup 2013 (ohne Einsatz), 2015 (6 Spiele/0 Tore), 2017 (4 Spiele/2 Tore) und 2019 (3 Spiele/1 Tor) teil. In mittlerweile 58 Länderspielen erzielte der Innenverteidiger vier Treffer.