Mens fysiognomi kan hjælpe læsere til at forstå en karakters personlighed, kan det også forstærke negative stereotyper eller skævheder. At forbinde visse fysiske træk med særlige karaktertræk kan føre til skadelige antagelser og fastholde skadelige fordomme. Forfattere bør nærme sig brugen af fysiognomi i litteraturen med forsigtighed og følsomhed for at undgå at fastholde skadelige stereotyper.