一路飞奔

    为减少深度神经网络的训练时间，基于各种高性能计算平台设计并行深度神经网络算法逐渐成为研究热点。由于功耗墙的存在，用于计算的CPU硬件架构从单核变成多核，并行计算的方式也从指令级并行变成线程级并行。近年来，以GPU、MIC和FPGA为代表的异构计算平台具有高能效的优点，被广泛用于不同研究领域的加速。异构计算的理念也被用来制造超级计算机[10]，如我国研制的异构计算集群天河一号（采用GPU作为...

一.云平台IT基础设施架构层 基础设施层又可进一步划分为物理资源层、虚拟资源层，以及资源服务与调度层 1. 物理资源层 2. 虚拟资源层 虚拟资源层在云计算架构中处于最为关键与核心的位置。该层次与“资源服务与调度层”一道，通过对来自上层操作系统及应用程序对各类数据中心基础设施在业务执行和数据平面上的资源访问指令进行“截获”。指令和数据被截获后进行“小聚大”的分布式资源聚合处理，以及“大...