Hardy

从2021年11月发布的全球超级计算机TOP 500榜单中各国超级计算机数量来看，中国共有173台超级计算机上榜，上榜数量连续9次位居第一，但数量较上期减少了13台。美国以150台位列第二，比上期增加了27台，中美两国上榜的超级计算机数量占榜单总量的近2/3。TOP 10榜单变化不大，日本的富岳Fugaku第4次封冠，我国最快的超级计算机神威·太湖之光仍是第4名，天河二号仍是第7名。近年来，我国超算进入快速发展的阶段，我国初步形成的超算产业链由上、中、下游构成,上游主要包括硬件资源（计算、存储、网络等）、软

从单个厂商在企业级固态硬盘产业链布局的角度上看，国内市场上主要有六种业务布局模式：包括能够一体化完成固态硬盘所有设计和生产流程的IT龙头企业——主要包括六大NAND原厂（其中部分厂商无自主DRAM），以及部分专注于固态硬盘部分硬件/软件核心部件生产的企业，此外还有部分厂商拥有跨各部件领域的业务布局，或是将下游的服务器生产也纳入业务版图。下载链接：中国企业级SSD行业发展洞察目前国内尚无企业能够实现固态硬盘全产线自主，但在各部件的独立领域中均有头部企业具备一定的市场竞争力，通过业务合作和生态布局，有望进一步拓

​AMD 在其 2022 年金融分析师日分享了新的核心路线图，概述了其到 2024 年的预计架构和工艺节点增强。该路线图包括基于 Zen 4 架构的 5nm 和 4nm CPU，以及基于 Zen 5 架构的 4nm 和 3nm 处理器。下载链接：AMD EPYC和Ryzen处理器技术合集（1）1、AMD epyc-7002数据手册.pdf 2、2U AMD ROME双路服务器准系统.pdf 3、AMD CPU攻略手冊.pdf 4、AMD epyc 7Fx2数据手册.pdf 5、AMD EPYC（霄龙）700

在数据为王的时代，人们对网络的要求更加严苛。然而传统的TCP / IP以太网连接占用了大量的CPU资源，并且需要额外的数据处理，已无法再满足当前更快、更高效和可扩展性的网络需求。在这种情况下，RoCE（RDMA over Converged Ethernet ）走进了人们的视野。什么是RDMA？RDMA（远程直接数据存取）就是为了解决网络传输中服务器端数据处理的延迟而产生的，无需使用CPU，就可以从一个主机或服务器的内存直接访问另一主机或服务器的内存。它释放了CPU...

高性能计算网络平台解决方案（技术细节参考：从高性能计算(HPC)技术演变解析方案、生态和行业发展趋势），能够解决物探高性能计算中，基于GPU的程序必须调用 IB栈，而传统TCP/IP 堆栈应用无法支撑高性能计算网络通信的问题。ROCE v2架构解决方案逐渐被客户接受（参考：详解RoCE网络技术和RoCE网络技术和实现方式）， 生态和应用不断成熟，同时网络传输效率和可靠性也得到加强，通过ROCE v2 技术的运营降低了主机CPU消耗。HPC是指利用聚集起来的计算能力来...

Hardy架构师技术联盟8月6日，UCloud联合西部数据正式发布新一代归档存储产品，该产品采用UCloud全新自研存储架构和西部数据的高密JBOD机型和SMR(叠瓦式磁记录硬盘)盘。新一代归档存储具备标准存储的可靠性，同时降低80%的存储成本，该产品提供最低价格的冷数据存储解决方案。根据IDC的预测，在数字经济的浪潮之下，随着5G、AI、物联网等技术发展，全球年新增数据量到2025年将达175ZB，如果用市面上主流的8T硬盘来存储这些数据，需要230多亿块硬盘，如果每块硬盘的...

本文对服务器知识进行了汇总，第四章：磁盘和SSD基础知识。本系列内容包括9大章节，从服务器的概念、服务器重要部件技术和架构组成，并且对磁盘、RAID知识，网卡等知识做了深度详细介绍。全系列总共145页高清PPT，提供高清原版下载。通过微信公众号文章“重磅：服务器基础知识全解终极版(145页PPT)”，获取高清PDF版材料下载地址。硬盘关键指标硬盘容量（Volume）容量的单位为兆字节（MB）或千兆字节（GB）。影响硬盘容量的因素有单碟容量和碟片数量。转速（Rotat..

本文对服务器知识进行了汇总，第一章：服务器通用基础知识。本系列内容包括9大章节，从服务器的概念、服务器重要部件技术和架构组成，并且对磁盘、RAID知识，网卡等知识做了深度详细介绍。全系列总共145页高清PPT，提供高清原版下载。重磅：服务器基础知识全解终极版(145页PPT)服务器是计算机的一种，它是在网络操作系统的控制下为网络环境里的客户机提供(如PC) 共享资源（包括查询、存储、计算等）的高性能计算机，它的高性能主要体现在高速度的CPU 运算能力、长时间的可靠运行、强大的I/...

在第54版TOP500排名中(2019.11发布)，中国和美国尽管在不同类别中也保持了其统治地位。同时，基于高性能Linpack(HPL)基准的500个系统的总体性能持续提高至目前的1.65 exaflops。而且该列表的入门门槛从2019年6月发布的1.02 petaflops增加到1.14 petaflops。排名靠前的超算系统TOP500列表排名靠前的系统很大...

CPU (Central Processing Unit，中央处理器)就是机器的“大脑”，是完成布局谋略、发号施令、控制行动的“总司令官”。CPU的结构主要包括运算器(ALU，Arithmetic and Logic Unit)、控制单元(CU，Control Unit)、寄存器(Register)、高速缓存器(Cache)和它们之间通讯的数据、控制及状态的总线。GPU...

关于Ceph架构和RedHat企业版Ceph Storage 2特性升级，我之前已经有过介绍，今天再来做个深入分析和总结，在文章最后讨论下Ceph成功的主要因素。

在上篇中，我们已经介绍了容器如何改变应用部署方式、为什么要通过CDS实现数据中心"轻量化"。那今天我们就来分析一下基于容器的Portworx存储、一个基于数据和控制面的容器定义存储技术和产品。

容器技术是最快被数据中心所广泛接受和采用的技术之一，从2013年起，据统计Docker的下载量已经快达到30亿次，容器已经彻底改变了应用部署方式，但是IT基础设施的管理却没有及时跟上。

前一段时间我们介绍了一款容器定义存储产品，文章分了上下两篇，容器定义存储(CDS)—存储技术的"瘦身"革命和容器定义存储(CDS)—春江水暖"Portworx"先知，文章介绍了容器定义存储的背景和未来发展趋势，今天我们沿承容器和存储的话题，来看看另一家专注于容器应用提供存储融合系统的科技公司Diamanti和其产品架构。

无论是系统运维人员还是解决方案技术支持人员，关注系统的性能都是最重要的工作，本系列文章搜集整理了互联网资源，试图从基本概念开始对磁盘存储相关的各种概念进行综合归纳，让大家能够对IO性能相关的基本概念，IO性能的监控和调整有个比较全面的了解。

vSAN跟随着 vSphere 6.5 的正式发布了vSAN 6.5 版本，该版本不但增加了不少新功能，而且进一步完善了 vSAN 的应用场景。最值得关注的就是vSAN成为了传统的iSCSI存储，再也不需绑着vSphere一起销售了，也可以直接给物理服务器上的应用负载提供专业存储服务。

Ceph作为一个高可用和强一致性的软件定义存储产品,目前在各行各业得到普遍应用，关于Ceph架构分析请参阅文章Ceph存储架构深度分析。今天我们主要Ceph后端存储引擎ObjectStore的实现方式和发展历程。Ceph后端支持多种存储引擎，以插件式的方式来进行管理，目前支持Filestore，Keyvalue Store，Memstore，NewStore以及最新的Bluestore，目前默认使用的Filestore。

2016年为止，IBM高端存储最新产品为DS8884、DS8886和DS8888。闪存系统最新产品，以FlashSystem 900为硬件基础，包装了Flash System V9000、A9000和A9000R，今天我们重点讨论下IBM Spectrum Scale软件定义存储产品。

HPE 3Par的NAS方案目前主要有两种选择(主要是NAS部分，SAN存储都一样)，一种是SAN+NAS网关(3PAR StoreServ File Controller)，另一种是一体化存储(类似华为V3、Netapp FAS系列)；通过HPE 3PAR File persona software套件支持NAS 对象功能。

机械硬盘的未来要靠高容量作为依托，在财报中，希捷表示未来18个月内它们将推出14和16TB机械硬盘，而2020年20TB机械硬盘就将诞生。也有资料显示，3.5英寸100TB硬盘大概在2025年就能面世。因此，机械硬盘与固态硬盘的拉锯战恐怕还会继续打下去。3.5寸6TB以上容量等大容量磁盘，都采用4K扇区磁盘，所以4K扇区磁盘技术是大容量磁盘的技术载体。前一段时间，分享过一篇文章vSAN 6.5解耦vSphere让存储更任性，里面提到4K磁盘，很多读者问我关于4K磁盘的问题，今天花时间跟大家分享下这方面的知

当我们回顾存储发展形态时，我们会想到DAS是最原始最基本的存储方式，在个人电脑、服务器等低端市场和场景上随处可见。存储的原始形态也来自于DAS，常见的用于连接DAS和主机系统的协议/标准主要 有ATA、SATA、eSATA、SCSI、SAS和FibreChannel等。

EMC收购视频存储设备厂商Isilon Systems完善EMC在分布式Scale-Out架构NAS技术方面的不足，近几年isilon在媒资、大数据和HPC场景得到客户的一致认可，也在去年和另外一个产品线Povital Hadoop推出了数据湖解决方案，应对互联网浪潮下客户对半结构化和非结构化数据的处理、存储需求。

近日EMC发布了数据湖2.0策略，新一代Isilon横向扩展NAS数据湖产品横跨边缘、核心和云实现数据高弹性流动；并将在2016年初推出对应的Isilon软件产品：Isilon SD Edge、下一代Isilon操作系统Isilon OneFS.Next和Isilon CloudPools全面进入“数据湖2.0”时代。

FusionStorage也是款可以部署在X86服务器上的种分布式块存储软件，利用服务器的本地HDD、SSD等介质组织成一个大规模存储资源池，对上层的应用和虚拟机提供标准的iSCSI块存储接口。FusionStorage软件支持主流的服务器产品，包括华为的服务器和HP DL380S，DELL、IBM多款服务器等。

LeftHand在2007年就推出VSA(Virtual Storage Appliance)软件，第二年被HP收购更名StoreVirtual配套HP的x86通用服务器(DL、ProLiant、BladeSystem等)一起销售，后续又推出StoreOnce VSA。StoreVirtual天然支持软硬件解耦，这正符合SDS/SBS存储的特点，由于部署简单、架构解耦、软件免费、不存在Vendor Lockin问题，其发货量自收购以来已经突破数百万套。

Nutanix是一套分布式存储系统，在物理节点上集成了存储和计算资源，但逻辑上计算存储融合平台将所有存储逻辑运行在一个预先封装好的虚拟机（存储控制虚拟机）中，该虚拟机在Hypervisor之上运行，与业务计算虚拟机隔离，并为业务虚拟机提供高性能存储服务。

EMC在2014 World大会上宣布了Project Liberty计划，主要内容是将专业存储设备实现软硬件解耦、虚拟化部署。目前EMC已经发布vVNX虚拟化社区版本并提供免费下载链接。vVNX是将一款基于业界领先的 VNX 阵列实现虚拟化（vVNX），用户可以享有VNX 提供丰富的数据服务、易管理能和丰富的用户体验，同时vVNX让开发和测试系统的部署变得灵活、简单。用户可以在使用VNX存储专业存储服务的同时，也降低采购和软硬件成本。

在传统的企业IT架构中，从主机，到小型机、x86服务器，历史上IT基础架构经历了从集中到分布式的演进，而近年来年随着定制机柜和融合系统的问世，互联网公司和传统企业IT市场出现了两种截然不同的发展方向：一方面是基于云计算、互联网的繁荣推动了定制化、小型化的分布式基础架构的发展，如Facebook、Google等大型互联网厂商在数据中心大量采用定制化服务器；一方面是服务器、存储、网络等分布式设备和虚拟化技术又在逐渐走向集成融合系统架构。

在软件定义篇中我们提到硬件重构是从互联网公司发起的，所以我们需要了解下互联网公司。互联网公司是云计算的推行者也是践行者，说起云计算就不得不说服务器和机柜，在大型互联网公司存储、服务器都是为特殊互联网业务定制。我们先从服务器定制开始说起。

海量数据和业务增长正以前所未有的趋势冲击着整个各个行业的数据中心，数据中心建设者也正以一种新的思维和模式去审视数据中心IT架构。在这一过程当中出现了两个泾渭分明的阵营：软件定义和硬件重构。以Google、Facebook和国内BAT为代表的互联网公司发起了“硬件重构”运动，例如OCP（由Facebook发起的开放运算计划）和天蝎项目（由BAT发起）；另一阵营以传统企业市场为主，希望以“软件定义”的方式整合数据中心。

关于SDS、SSD和闪存阵列方面，初创公司更具有创新和想法，一般由它们在引领潮流；很多初创公司如Texas Memory Systems，XtremIO和SanDisk等，它们都因为自己卓越的表现引起传统IT巨头的关注，乃至花重金收购。关于初创公司解读的文章已经举不胜举，今天我们花点时间聊一下几个具有代表性的传统存储厂商以及对应的闪存策略。

近两年随着闪存颗粒密度增加、价格下降，SSD成为一个炙手可热的话题；今天有幸跟大家交流一下闪存颗粒的相关技术。闪存(Flash)是相对于HDD而言的一种非易失性存储器，Flash分为NOR Flash和NAND Flash，NOR Flash可以当作内存使用直接执行程序，相比DDR 、 SDRAM 或者 RDRAM具有掉电数据不丢失等特点，所以在嵌入式设备(ARM/MIPS等体系架构)中，一般采用NOR Flash存储BootLoader和OS程序。但今天我们的重点是NAND Flash。

闪存最明显特点就是稳定/低时延，高IOPS，在评估性能时，我们也会关注90% IO落入规定的时延范围(性能是一个线性范围，而不是某一个点)，性能提升、数据保护等追求所有软件特性都基于inline实现。

作为本系列最后一篇文章，今天和大家谈谈闪存的接口技术和发展趋势。我们知道闪存磁盘是在HDD以后出现的，由于SSD优异的随机性能、越来越大的容量和越来越低的成本等优势，使得闪存热度上升、乃至大有替换HDD的趋势。由于历史继承性等原因，SSD在设计是也是借鉴了部分HDD技术，包含接口技术。

Openstack是继Linux之后又一个非常成熟和受欢迎的开源云计算解决方案，Openstack和Ceph的集成更让开源项目锦上添花。对OpenStack而言，最重要的四个子项目分别为Cinder、Swift、Glance和Nova。Ceph作为优秀的分布式存储系统，实现对OpenStack相关子项目进行集成或替代，目前在OpenStack中扮演者非常重要的角色。

不久前Red Hat公司发布了下一代开放软件定义存储平台Red Hat Ceph Storage 2。最新版本的 Red Hat Ceph Storage 基于 Ceph Jewel 发行版，在存储功能和OpenStack集成能力上做了增强。下面我们来讨论下本次Ceph版本更新功能和Ceph在OpenStack中的地位。

Ceph是呼声很高的开源分布式的SDS产品存储系统。同时提供对象存储、块存储和文件系统存储三种功能，满足不同应用需求。Ceph使用C++语言开发，遵循LGPL协议开源。Sage Weil(Ceph论文发表者)于2011年创立了以Inktank公司主导Ceph的开发和社区维护。2014年Redhat收购 inktank公司，并发布Inktank Ceph企业版（ICE）软件，业务场景聚焦云、备份和归档，支持对象和块存储应用。从此出现Ceph开源社区版本和Redhat企业版。

关于无代理备份，我们了解比较多的是备份软件调用虚拟化厂商提供接口，如VADP、VSS或Xen API等实现虚拟机Guest OS免安装备份代理的备份(通常MA上的iDA是用来装载软件或硬件快照)，可以对虚拟进行高级智能虚拟机管理，如对关闭状态虚拟机进行保护等。

备份软件提供丰富的组网方式，供用户根据现网情况来灵活部署。目前大多数备份软件都支持LAN Base、LAN Free这两种最成熟的组网方式，但是这两种组网对业务服务器都有性能影响。而Server Free组网下，数据不需经过业务服务器，可以避免备份任务对业务影响。为了减少备份网络压力，备份软件还提供重删压缩功能，减少备份数据在备份网络上传输。

从今天开始，我将陆续分享有关备份架构和特性系列知识，数据保护方案目前主要分了两大类，一类是备份，另一类是容灾。备份主要是对数据提供多副本冗余，当数据发生误操作、病毒感染和丢失等逻辑错误后，可以用备份副本进行恢复，保证数据少丢失或甚至不丢失，CDP也是一种实时数据备份技术。