消息传送机制：阻塞方式，必须等到消息从（）送出之后才可以执行后续的语句；非阻塞方式，不须等到消息从（）送出就可以执行后续的语句，并不保证资源的可再用性。

MPI是一个库，而不是一门语言；MPI是一种消息传递编程模型，是提供一个（）消息传递接口标准。

填空题MPI是一个库，而不是一门语言；MPI是一种消息传递编程模型，是提供一个（）消息传递接口标准。

（）是当前并行计算领域的一个非常重要的并行程序设计方式。

填空题（）是当前并行计算领域的一个非常重要的并行程序设计方式。

并行粒度：（）。

填空题并行粒度：（）。