上帝看到他们的行为后自然不允许他们这么做，他让人们变得目盲，并且打乱了他们的语言，于是他们就成了现在的样子。（《巴鲁克第三启示录》3:5-8）
米德拉什.拉比文献记录了许多关于建造巴别塔的各种缘由以及建造者的不同意图。根据其中米德拉什的一篇文章，修建塔的人们，犹太人的作品中称其为“分离的一代”，说：“上帝无权让自己居住在天堂，却把我们留在凡间；因此我们要建一座塔，塔上放上一个拿着剑的塑像，让他看起来就像在跟上帝宣战一样”。建造巴别塔不仅是对上帝表示不敬，也是对亚伯拉罕表达不敬，