传说释迦牟尼来到该地区传播佛教，有人推测，一两个人成为比丘跟随他的脚步。不过，在释迦牟尼的一生佛教并没有获得多大的支持。直到孔雀王朝时阿育王统治下的佛教在这地方获得了立足点。佛教以各种形式生存至十三世纪，直到突厥穆斯林入侵。他们摧毁众多的寺院和那烂陀寺，佛教迅速瓦解，信徒大多改宗印度教与伊斯兰教，但没有被完全征服。在随后的几个世纪中，几乎所有剩余的佛教徒居住在吉大港周围地区。他们的宗教似乎是部落宗教和佛教教义的混合物。据1981年人口普查，在孟加拉国共有约538,000佛教徒，佔不到1％的人口。