Chociaż DALL-E jest bardzo zaawansowany, ma pewne ograniczenia. Nie generuje obrazów o charakterze dorosłym, brutalnym czy nienawistnym. Ponadto, aby uniknąć naruszenia praw autorskich, model nie tworzy obrazów przypominających żyjące postacie publiczne ani nie naśladuje stylu żyjących artystów.