语症的潜在原因，但失语症通常只会发生在，当有实质性损害导致左半球大脑（负责语言功能）中的脑皮层外层）和/或底层的白质（white matter）。若在上图的蓝色区域中有实质性损害，都可能会引发失语症。左半球深皮层下结构的损伤有时候也会引发失语症，包括丘脑（thalamus）、脑内囊（internal capsules）、脑外囊（external capsules），以及尾状基底核失语症的类型与症状取决于受到损伤和萎缩的区域与程度。只有极少数的患者是因为右半球脑区受损而出现失语症的情况。有研究显示，这些患