Выступал за юношеские и молодёжные сборные Кот-д’Ивуара. В июне 2019 года в преддверии Кубка африканских наций был впервые вызван в национальную сборную Кот-д’Ивуара. Дебютировал за неё в товарищеской встрече с Угандой. Думбия вышел в стартовом составе и на 74-й минуте был заменён на Вонло Кулибали. На континентальном первенстве принял участие в одном матче — стартовой встрече с Южной Африкой, выйдя за три минуты до окончания основного времени.