高性能计算汇总-Mpi,openMpi,tbb,CUDA,OpenCL等并行计算或cpu，gpu混合计算技术

原文链接：http://blog.youkuaiyun.com/guomei/article/details/6642272

经常有人问Mpi和openMPI的区别，或者CUDA和OpenCL的区别，这篇文章就是为了总结下高性能计算的相关知识。

目前高性能计算有两大趋势，并行计算集群和CPU处理器和GPU显卡的异构混合计算。
下面做对这些名词进行一个简单的介绍：
MPI－ （Message Passing Interface）是一个并行计算的API，适合超级电脑，大规模集群。

OpenMPI 是一种高性能消息传递库，可以很方便的把串行程序，改为多线程并行程序，适合多核心电脑，可以和MPI搭配使用，对C语言和Fortran高性能计算支持很好。

tbb-Intel Threading Building Blocks 线程构建模块，是Intel公司开发的并行编程开发的工具,能很好的支持C++并行计算编程。

CUDA(Compute Unified Device Architecture)，显卡厂商NVidia推出的运算平台，使用显卡和处理器进行异构并行计算。

OpenCL (Open Computing Language) 是一个为异构平台编写程序的框架，此异构平台可由CPU，GPU或其他类型的处理器组成, 最早由苹果公司开发。