一文详解深度学习冷板式液冷散热技术规范及要求

深度学习 | 东数西算 | 液冷散热

数据挖掘 | 数据分析 | 高性能计算

随着深度学习、东数西算、医药研发、数据分析、数据挖掘、遥感测绘、高性能计算等技术的快速发展，数据中心的创建与日俱增，传统的风冷散热方式已经不同满足数据中心散热的需求，冷板式液冷散热逐渐出现在人们的视线中。

注：由于篇幅有限需要更多详细资料，请在公众号末尾留下您的邮箱，小编会将PDF文件发您邮箱，共同进步。

气候变化正给人类生产生活带来日益严峻的挑战。为在促进经济繁荣的同时保护地球，联合国制定了 2030 可持续发展目标，将降低能源碳强度，采取紧急行动应对气候变化及其影响作为重要内容，推动全球各国提供更多资源和更明智的解决方案。2021 年底发布的《第五届联合国环境大会续会的部长级宣言草案》再次强调，推动绿色转型，减少碳和非碳温室气体排放，实现可持续发展目标。

中国高度重视落实联合国 2030 年可持续发展议程，并基于推动实现可持续发展的内在要求，将生态文明建设明确为国家战略，宣布了“碳达峰”和“碳中和”目标，让绿色低碳成为各行业转型升级和实现高质量发展的重要方向。在全球落实可持续发展行动，中国积极推进生态文明建设的进程中，5G、人工智能、物联网等新技术的快速普及应用，在为各行各业高质量发展提供前所未有新动能的同时，也让作为新型基础设施的数据中心规模不断扩大，能耗持续高速增长。据相关估算，全国各类型数据中心用电量总和已约占全社会用电量的 1.5%-2% 左右，且机柜规模仍保持高速增长态势。参照美国劳伦斯伯克利实验室对美国数据中心产业发展相关研究估算，在不采取相关措施的情况下，数据中心总用电量有可能翻倍甚至更高。

面对不断增长的能源消耗与经济社会可持续发展的双重压力，加速数据中心运营模式的绿色转型成为当务之急。2021 年 5 月，国家发改委等四部委联合发布《全国一体化大数据中心协同创新体系算力枢纽实施方案》，将绿色低碳列为基本原则，强调通过创新技术全面提高其能源利用效率；同年 7 月，工信部印发《新型数据中心发展三年行动计划（2021-2023 年）》,明确提出新建大型及以上数据中心电能利用效率（Power UsageEffffectiveness，PUE）降低到 1.3 以下。2022 年 1 月，国务院印发“十四五”数字经济发展规划，随后国家发展改革委会同相关部门推进“东数西算”工程实施，强化数据中心绿色发展要求，强调大型、超大型数据中心 PUE 降到 1.3 以下，并在给多个算力网络国家枢纽节点启动的复函中，都将 PUE 指标控制在 1.25 以内。

在政策拉动以及数据中心降本增效等自身需求的驱动下，整个 ICT 产业积极采用创新技术和模式，围绕降低 PUE 这一关键指标，通过推进基础设施智能化、创新和采用制冷散热技术，以及提升能效与供电密度等系统化措施和多元化的技术与解决方案，综合性地创新数据中心高效节能体系，推动数据中心全生命周期降耗增效。

深度学习冷板式液冷解决方案

 

众冷板液冷生态伙伴以“创造改变世界的技术，改善地球上每个人的生活”为宏旨，在不遗余力地通过将可持续纳入产品设计、生产、使用全生命周期，系统化减少碳足迹的同时，聚力携手更广泛的产业伙伴开放创新，基于在数据中心可持续发展上构建起的完备解决方案矩阵，重点聚焦的数据中心机架电源设计、先进冷却技术和数据中心智能节能三个垂直领域，充分应用芯片、服务器、机架、数据中心四个水平方向的技术方案和丰富案例，继续深入实践，全方位、立体化推动数据中心不断实现能效优化和低碳转型。同时，还将继续与各界伙伴协同推进数据中心功率密度演进、液冷技术应用与设计等标准和规范建设，助力构建长效机制，引导数据中心加速迈向高效、清洁、集约、循环的绿色发展新纪元。

由英特尔推出的《绿色数据中心创新实践——冷板液冷系统设计参考》是产业生态伙伴紧密合作、联合创新的重要成果之一，内容涵盖液冷一次侧及二次侧整个链路的设计，旨在与冷板液冷生态伙伴及潜在使用者分享对于冷板液冷技术关键部件设计选型的考量，其付梓发布也是要通过面向更广泛的产业伙伴展现冷板液冷技术关键部件的研究进展，来共同促其标准化，进而降低其设计与使用成本，推动建立并完善冷板液冷的生态系统，为推进数据中心行业加速脱碳转型，并以此支持各行各业实现低碳发展，共同为中国实现碳达峰、碳中和目标而做出新的贡献。

本文对参与冷板散热系统设计、验证、管路的连接组装、系统的检测及维护人员均具有参考意义。

 

冷板式液冷整体链路图

数据中心发展趋势

随着云计算、大数据、人工智能等新一代信息技术快速发展，数据呈现爆炸式增长。作为储存和计算基础设施的数据中心加速建设是大势所趋。

一、数据中心总体能耗不断抬升

随着数字经济在人类活动中的占比逐渐增加，信息数据量激增，与之对应的数据分析、处理能力不断提升，使得服务器的密度越来越高，导致数据中心产生热量日益增多。据行业数据报告显示，预计未来 5 年，其仍将以 15%~20% 的速率持续增长，也将使未来数据中心行业用电占社会总用电量的比率进一步提升。

作为“新基建”的引领行业，数据中心是以技术创新为驱动和信息网络为基础的高质量发展行业，在为社会和工业的数字转型、智能升级、融合创新等服务提供基础设施体系的同时，快速增加的能源消耗也带来热点地区局部能源的稀缺和地域之间的不均衡。在北上广这些核心地区，很多潜在项目面临有房无电的窘境。因此，作为单体能源消耗密度高的行业，数据中心必须以绿色低碳、节能减排来应对快速发展带来的挑战，才能实现健康可持续发展。

根据相关国家政策要求，在未来布局的算力枢纽 8 大节点中，东部数据中心 PUE 需要降低到 1.25 以下（包括华南地区），西部地区的数据中心 PUE 要求在 1.2 以下，且要求制冷系统采取新的解决方案。

二、功率密度随需求不断提高

近年来，数据中心单位空间产生热量的瓦数正在不断上升，同时功率密度也在增加，严重制约了传统冷却方法和技术的进一步应用和推广。因此，液冷作为数据中心新兴的制冷技术，逐渐被人们接纳并应用。

Uptime Institute 发布的《2020 全球数据中心调查报告》显示，2020 年全球 71% 的数据中心平均功率密度低于 10kW / 机架，最常见是 5~9kW / 机架，平均单机架功率为 8.4kW / 机架，平均功率密度高于 20kW / 机架的数据中心约占 16％。虽然整体功率密度相较于高性能计算（HPC）等领域还不算高，但总体上升趋势明显，相比于2017 年的 5.6kW / 机架、2011 年的 2.4 kW / 机架增长显著。而且宏观上看，数据中心未来的功率密度还将继续上升。

造成这一趋势的原因主要有两个方面。一是从应用层面来看，计算密集型应用场景的激增，加上云业务广为互联网头部企业采用，导致承载这些应用负载的服务器设备功耗大幅增加，进而使得数据中心设计功率密度呈现逐年增大的趋势。另外一个原因来自 IT 硬件层面。为了满足高算力负载需求，通过单机架叠加多核处理器提高计算密度，导致了 IT 硬件的处理器功耗显著增加，也使得单机架功率密度越来越高。比如，从当前占据全球服务器 CPU 主要市场的英特尔® 架构处理器看，英特尔® 至强® 可扩展处理器 TDP（热设计功耗）从 2019 年的 205W 上升了到达现在的 270W，在 2023 年初将达到 350W，提升近一倍。而这在提供强大算力的同时无疑也带来散热困扰，而解决了散热瓶颈就意味着实现算力提升。

数据中心液冷散热解决方案

采用风冷的数据中心通常可以解决 12kW 以内的机柜制冷。随着服务器单位功耗增大，原先尺寸的普通服务器机柜可容纳的服务器功率往往超过 15kW，相对于现有的风冷数据中心，这已经到了空气对流散热能力的天花板。而液冷技术作为一种散热能力更强的技术，可以支持更高的功率密度。

一、液冷的优势

1、满足高功率密度机柜的散热需求。液冷的高效制冷效果有效提升了服务器的使用效率和稳定性，同时可使数据中心在单位空间布置更多的服务器，提高数据中心使用效率；

2、循环系统耗能少，系统噪音小。使用高比热的液体工质，冷却工质循环能耗少，且液冷简化了换热流程，也减小了风冷末端在房间输送冷风过程中受湍流影响所致的部分能量衰减的问题；

3、占地小，易于选址。使用液冷系统的数据中心相对于传统的风冷数据中心更加简单，去掉了庞大的末端空调系统，提高了建筑利用率，在小空间里也能布置足够规模的服务器，应用场景更易布置，受地理位置影响较小，全国布局皆可实现低 PUE 运行；

4、降低 TCO，运营 PUE 较低，全年 PUE 可达到 1.2 以下。采用液冷散热方案的数据中心 PUE 比采用风冷的常规冷冻水系统降低 0.15以上，可让有限的能源更多分配给算力，从而降低运行成本，增加算力产出；

5、余热回收易实现。相比传统水温，使用液冷方案的水温更高，温差大，热源品味和余热系统效率高；

6、适应性强。冷板式液冷兼容性强，易配套开发，不需改变原有形态和设备材料；空间利用率高，可维护性强，布置条件与普通机房相近，可直接与原制冷系统（常规冷冻水系统）兼容适应。

基于冷板液冷解决方案的一次侧系统

对于液冷二次侧末端不同的水温需求，液冷一次侧冷源可采用机械制冷系统和自然冷却系统。机械制冷系统包括风冷冷冻水系统和水冷冷冻水系统，可提供 12℃-18℃ 的中温冷冻水；自然冷却是在室外气象条件允许的情况下，利用室外空气的冷量而不需机械制冷的冷却过程，自然冷却系统可采用开式冷却塔、闭式冷却塔和干冷器等设备实现，可提供 30℃ 以上的冷却水。液冷一次侧冷源形式需结合二次侧末端水温需求和项目地室外环境情况确定。

一、机械制冷系统

1、风冷冷冻水系统

风冷冷冻水系统是冷冻水制备的一种方式，主要由风冷冷水机组、冷冻水泵及配套设施组成，其液态制冷剂在其蒸发器盘管内直接蒸发，实现对盘管外的冷冻水吸热而制冷，并通过风冷的方式冷却为液态。

风冷冷冻水系统不需要占用专门的机房且无需安装冷却塔及泵房，初期成本投入较低、运行方便，不需要专业人员维护，无冷却水系统，具备节水和降低维护费用等优点。但风冷冷水机组一般装在室外，运维环境相对较为恶劣，维护性及可靠性均不如水冷冷水机组，并且风冷机组在夏季高温制冷效果较差，运行效率较低。

2、水冷冷冻水系统

水冷冷冻水系统是冷冻水制备的一种方式，主要由水冷冷水机组、冷冻水泵、冷却水泵、冷却塔及配套设施组成，其液态制冷剂在蒸发器盘管内直接蒸发，实现对盘管外的冷冻水吸热而制冷，并通过水冷的方式冷却为液态。

水冷冷冻水系统具有耗电量较低、全年制冷效果好、可靠性高和使用寿命长的优点。但其需要专用机房、冷却塔、冷却水泵、冷冻水泵等设备，初投资较大，并且需要循环水，水资源消耗大，且机组本体和冷却设施需要维护，相较于风冷机组，其维护费用比较高。

二、自然冷却系统

1、开式冷却塔

开式冷却塔经过将循环冷却水直接喷淋到冷却塔填料上，同时由风机带动冷却塔内气流流动，通过室外空气与冷却水之间的热质交换蒸发冷却循环水，冷却后的循环水在冷却塔底部出水。开式冷却塔中循环冷却水与室外空气存在热质交换。

 

开式冷却塔示意图

开式冷却塔初投资和运行成本均较低，占地面积较小，重量较轻，但其运行水质较差，易引起被冷却换热器结垢，适用于室外空气品质较好的区域。另外，虽然可增设一级板式换热器和冷却水泵来避免核心换热器结垢，但对应系统较为复杂，初投资提升。

2、闭式冷却塔

闭式冷却塔是将管式换热器置于塔内，通过室外流通的空气、喷淋水与管内的循环冷却水进行热交换而实现向大气散热的设备。闭式冷却塔有内循环和外循环两个系统，其内循环通过与被冷却设备对接，构成一个封闭式系统，将系统热量带到冷却塔，也即内循环水通过换热盘管将热量传递到大气中；外循环由循环喷淋泵，布水系统、集水盘及管路组