MPI标准和Map-Reduce编程模型之间的比较？

Question

正如我所学的，各种并行范例标准的基础知识，例如OpenMP，MPI，OpenCL，可以编写并行程序。但是我对Map-Reduce编程模型不了解很多。

众所周知，各种流行的公司都在遵循Map-Reduce编程模型来解决其庞大的数据密集型任务。MPI和MPI都是为大型并行计算机和工作站群集上的高性能计算而设计的。

所以我的第一个困惑是..我可以使用Map-Reduce模型代替MPI标准吗？反之亦然？还是取决于应用！

它们之间的确切区别是什么？

Which one is better and when?

Answer 1

您可以将Map-Reduce理解为MPI功能的子集，因为它类似于具有用户定义功能的MPI集合操作。因此，您可以使用MPI而不是Map-Reduce，反之亦然，因为在MPI中您可以描述更多的操作。Map-Reduce的主要优势似乎在于将精力集中在单个并行概念上，从而减少了使用它需要学习的界面。