CUDA和GPU介绍及两者之间的关系

         并行计算这个东西一定会逐渐流行起来，这是用硬件对算法加速，是加速很快的方法。举个简单的例子，一般
八核手机比单核手机执行更快，这八核用的原理其实就是并行计算。最近围棋人机大战，虽然ALPHAGO用到了蒙特卡 洛算法和神经网络算法，但其中也一定用到了并行计算，因为他需要很快的执行速度。其实并行计算确实是个很神奇的“东西”，我用程序做两个大小为1024*1024矩阵的乘法，并行计算执行速度比一般算法快30倍左右（在下面有运行结果截图）。

1、GPU介绍

      GPU是图形处理器（Graphics Processing Unit）的缩写，是电脑显卡的处理器。GPU和CPU相比，GPU有更多的晶体管用于数据处理，特别适用于解决并行计算的问题。可以使程序执行速度加快。

                                            1024x1024的两个矩阵相乘执行速度比较。

                           

2、GPU产生背景

      GPU产生之前，处理2D、3D图像都是依赖于CPU，但是由于CPU任务繁多，而且还有设计上的原因，这样面对日益复杂的3D图形图像时就会常常出现显卡等待CPU数据的情况。GPU的出现就是为了解决上述问题。