ב-27 במרץ 2018, אסומבאלונגה ערך את הופעת הבכורה שלו בנבחרת בהפסד 0–2 ל. ב-30 ביוני 2019, כבש את שער הבכורה שלו בנבחרת בניצחון 0–4 נגד במסגרת גביע אפריקה לאומות 2019.