性高速缓存非均匀存储访问模型（CC-NUMA）和非远程存储访问模型（NORMA）。
并行计算模型.不像串行计算机那样，主流使用冯·诺伊曼的计算模型，并行计算机没有一个统一的计算模型。不过，人们已经提出了几种有价值的参考模型：PRAM模型，BSP模型，LogP模型，C^3模型等。
并行计算机网络.并行计算机是靠网络将各个处理机或处理器连接起来的，一般来说有以下几种方式网络的基本术语：
并行算法.并行算法是一门还没有发展成熟的学