VM不同，MPI是已经在诸如MPICH和Open MPI的系统中实现的规范。
集群管理.使用计算机集群服务器的挑战之一是管理它的成本，如果集群有N个节点，有时可能高达管理N个独立机器的成本。 在某些情况下，这为管理成本较低的共享内存架构提供了一个优势。 由于便于管理，这也使得虚拟机非常流行。
任务调度.当大型多用户集群需要访问大量数据时，任务调度就成为一个挑战。在具有复杂应用环境的异构CPU-GPU集群中，每项作业的性能取决于底层集群的特性。因此，将任务映