<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[SDSHBlock的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/SDSHBlock</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; SDSHBlock]]></copyright><item><title><![CDATA[存储资源盘活案例分析]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/131251796</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/131251796</guid><author>SDSHBlock</author><pubDate>Fri, 16 Jun 2023 18:02:17 +0800</pubDate><description><![CDATA[通过存储资源盘活系统HBlock盘活企业内闲置资源，构建高效易用、安全可控的存储底座，为用户提供更安心、稳定、便捷的数据存储服务。这批服务器通过存储资源盘活系统盘活统一纳管，将服务器内剩余资源的一部分空间盘活，构建成分布式存储资源池，通过这部分利旧资源实现云计算业务调度系统的数据存储和备份，从而解决云计算业务调度系统的数据存储问题。对云平台实施资源调度和运营管理的同时，云资源管理背后的数据问题也是需要关注的重点问题，高性能、低成本、可靠性强的数据存储方案是云计算调度系统对数据存储能力的基本要求。]]></description><category></category></item><item><title><![CDATA[AI时代下，我们需要什么样的存储？]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/131113037</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/131113037</guid><author>SDSHBlock</author><pubDate>Thu, 08 Jun 2023 17:52:01 +0800</pubDate><description><![CDATA[存储资源盘活系统是高性能的。奖励建模：在奖励建模步骤中，训练者将不再收集数据，而是给模型输入提示（prompt），对于模型输出的补全（completion）进行比较，对模型的多个输出结果进行打分排名，并反馈给模型。分析以上阶段的存储需求，我们发现：第一，考虑到过去5年中模型参数呈指数增长，下一代大语言模型很可能是万亿参数模型，快速增长的模型需要足够的空间来存储。第二，预训练和有监督的微调两个阶段，需要准备大量的训练集，尤其是预训练阶段，训练集的多少很大程度上决定了模型的表现，因此也需要相应的存储空间。]]></description><category></category></item><item><title><![CDATA[存储资源盘活系统助力信创存储底座建设]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/130986634</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/130986634</guid><author>SDSHBlock</author><pubDate>Thu, 01 Jun 2023 13:50:08 +0800</pubDate><description><![CDATA[存储资源盘活系统可基于异构硬件进行部署，兼容x86、ARM、龙芯等平台设备，它作为一组用户态进程运行，与底层硬件解耦，不依赖任何特定版本的Linux内核或发行版，不依赖、不修改操作系统环境，不独占整个硬盘，不干扰其他进程的执行。中共中央政治局于2022年12月6日召开会议，提出2023年首先是要全力发展经济，将“稳增长”放倒在首位，更加注重“安全”，将“安全”放在了“改革开放”之前，可以说“安全已成为推进改革开放的前提”，强调“科技政策要聚焦自立自强”，可见以自主可控、安全可信为主的信创产品大有可为。]]></description><category></category></item><item><title><![CDATA[从绿色节能趋势看存储资源盘活系统HBlock]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/130872714</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/130872714</guid><author>SDSHBlock</author><pubDate>Thu, 25 May 2023 18:08:48 +0800</pubDate><description><![CDATA[在架构节能方面，存储资源盘活系统不独占硬件资源，可与现有应用混合部署在同一套硬件设备上，不影响现有业务的运行的同时将闲置存储资源予以整合，帮用户把现有服务器集群中存储资源利用率不高的设备进行统一管理，形成统一存储资源池。数据中心约超过一半的成本是电费，数据存储系统作为数据中心三大件之一，能耗也约占三分之一，面对非结构化数据量的快速增长挑战，以及国家对数据中心绿色节能要求的提高，分布式存储的绿色节能愈来愈加重要。分布式存储需要在保证性能的前提下，综合考虑规模、介质、架构、创新等因素，最大限度降低能耗。]]></description><category></category></item><item><title><![CDATA[从分布式存储管理功能发展趋势看存储资源盘活系统HBlock]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/130745266</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/130745266</guid><author>SDSHBlock</author><pubDate>Thu, 18 May 2023 13:46:57 +0800</pubDate><description><![CDATA[存储资源盘活系统HBlock是纯软件全用户态的SDS，与底层硬件完全解耦，集群环境各节点配置可以不同，如兼容x86及ARM架构，支持不同CPU、内存和硬盘配置，且不依赖、不修改操作系统环境，不独占硬盘，不干扰任何其他进程的执行，全面管理所有存储空间。随着企业IT的架构复杂化、多样化，非结构化数据进入到企业生产决策流程，企业对非结构数据的安全可靠、自动化管理、跨云共享提出了新的要求，为满足新的数据管理需要，分布式存储正向着硬件异构、多数据中心容灾、智能化运维的方向创新演进。]]></description><category></category></item><item><title><![CDATA[论存储资源的盘活]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/130271198</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/130271198</guid><author>SDSHBlock</author><pubDate>Thu, 20 Apr 2023 17:10:24 +0800</pubDate><description><![CDATA[此外，为了将数据从一家厂商的存储阵列移植到另一家厂商的存储阵列，客户可能需要获得专业化服务，而这些服务需要额外的高昂费用，增加企业的IT运维成本。无论从何种角度考虑，盘活存储资源势在必行。针对盘活应用，创新性提出自定义负载，可根据业务系统的忙、闲时的不同，把能实现错峰填谷效果的业务系统配置在资源池的同一个集群中，将能更好地提高资源池的利用率。当遇到因断电等极端条件导致的服务器宕机情况，当供电恢复服务器重启后SRRS能够无缝恢复至断电前的运行状态，具备可靠的自愈能力，帮助企业顺利度过实施盘活过程的不稳定期。]]></description><category></category></item><item><title><![CDATA[云原生加存储资源盘活提升AI资源利用率]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/130133849</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/130133849</guid><author>SDSHBlock</author><pubDate>Thu, 13 Apr 2023 16:33:03 +0800</pubDate><description><![CDATA[云原生（Cloud Native）是构建应用程序一类技术的统称，也是面向“云”而设计的应用，在使用云原生技术后，开发者无需考虑底层的技术实现，可以充分发挥云平台的弹性和分布式优势，实现快速部署、按需伸缩、不停机交付等。随着容器、微服务平台的大规模应用，快速开发迭代、发布频繁对于存储系统的弹性支撑能力提出了严峻挑战，且不同的业务数据保存在计算节点本地或者不同的外部存储设备中，数据流动性差，不仅导致存储空间及性能资源浪费严重，数据灾备方案难以统一。为了解决以上问题，可以引入云原生加存储资源盘活的组合解决方案。]]></description><category></category></item><item><title><![CDATA[东数西存场景的探索与实践]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/129988345</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/129988345</guid><author>SDSHBlock</author><pubDate>Thu, 06 Apr 2023 14:14:10 +0800</pubDate><description><![CDATA[有的政企类客户有强烈的属地要求，采用指定位置可以满足。为了解决这个问题，可以在靠近用户的地方建立资源池，这样能解决数据访问体验差的问题，但是带来了新的问题：用户在存取数据之前需要先检索数据存储位置，这就需要一个集中式的平台，提供统一的检索能力，当用户需要访问数据时，先从平台获得存取位置，然后再向目的资源池发起读写请求。同时，叠加了低碳政策的要求，利用了HBlock的特点，不仅充分利用了空闲的存储资源，也充分的利用了空闲的计算资源和内存资源，将空闲的服务器整合成了高性能的虚拟存储阵列，满足了客户的需求。]]></description><category></category></item><item><title><![CDATA[解析存储资源盘活系统的三种缓存方式]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/129863676</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/129863676</guid><author>SDSHBlock</author><pubDate>Thu, 30 Mar 2023 18:29:27 +0800</pubDate><description><![CDATA[为了同时得到较高的读写性能与较好的数据安全性，可以使用Write Back模式，并启用卷的高可用特性，即可实现多节点之间的缓存同步，避免单节点故障导致的缓存数据丢失。缓存中的数据由后台线程同步到底层磁盘，触发同步的时机有两种：数据在缓存中的存放时间超过阈值、缓存中待同步的数据量超过阈值。后台线程在同步之前，会对缓存中数据进行合并，将客户端的小IO转换为对底层磁盘的大IO，避免以低效的方式访问磁盘，进一步提升了客户端的写性能。空间局部性：一个位置的数据被访问后，在不久的将来该位置附近的数据很有可能也被访问。]]></description><category></category></item><item><title><![CDATA[盘活存储资源，绿色高效发展]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/129735876</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/129735876</guid><author>SDSHBlock</author><pubDate>Thu, 23 Mar 2023 17:42:09 +0800</pubDate><description><![CDATA[在一些企业项目中，由于前期业务规划不够细致，或者实际使用和预期出现较大偏差，会出现多块硬盘空跑，CPU、内存利用率长期低于15%的情况，给企业带来资源上的浪费。可以见得，优化沉睡服务器将会给企业带来巨大收益。以某块存储盘活项目为例，该客户因自动驾驶高存储要求导致数据存储空间紧缺，需建立新的分布式存储底座，并希望该存储底座能够复用当前空闲服务器，实现跨机房部署。在项目实施过程中，天翼云通过复用数台空跑服务器，实现客户减碳需求，并通过快速部署、简化运维，为客户打造了强健的统一块存储底座，高效支撑各类应用。]]></description><category></category></item><item><title><![CDATA[深度解析内容生成式AI背后的大语言模型，探寻智能浪潮下的存储机遇]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/129592772</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/129592772</guid><author>SDSHBlock</author><pubDate>Thu, 16 Mar 2023 17:21:25 +0800</pubDate><description><![CDATA[打一个通俗易懂的比方，如果把整个AI行业比作一座写字楼的话，各个面向最终用户的具体应用就是一个个摆放不同设备的房间，面向不同行业的AI能力与各场景的训练数据集就是大楼的水电消防系统与基础装修，底层的模型就是盖楼用的原材料。]]></description><category></category></item><item><title><![CDATA[从ChatGPT入手，分析AI底层产业链中的存储资源盘活机会]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/129427845</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/129427845</guid><author>SDSHBlock</author><pubDate>Thu, 09 Mar 2023 17:51:31 +0800</pubDate><description><![CDATA[AI应用火热的背后，是整个产业链的深层变革。在人工智能按下“快进键”的背景下，存储行业需要不断完善更加适配AI的基础设施，打造创新性的产品，深度赋能人工智能领域企业跑出“加速度”，AI应用也将在存储资源盘活系统的助力下进一步加速“走深向实”，全面推动AI产业高质量发展。针对AI机房的高耗电问题，存储资源盘活系统作为一组用户态进程来运行，可以在同一个Linux操作系统实例中与其他应用程序并发运行，在不影响整体功耗的情况下大大提高了硬件利用率，也在一定程度上缓解了AI机房“耗电高”的痛点。]]></description><category></category></item><item><title><![CDATA[一个机房当做两个用？混合部署打造新型绿色数据中心]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/129298346</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/129298346</guid><author>SDSHBlock</author><pubDate>Thu, 02 Mar 2023 12:13:29 +0800</pubDate><description><![CDATA[SRRS具备不独占硬件资源的特点，可以在不影响现有业务运行的同时将闲置存储资源进行整合，形成统一存储资源池，能够极大程度的提升数据存储的利用率。综合供给方与需求方的现状，我们可以发现，如何灵活地使用已有的机架空间，为用户提供定制化、弹性化服务，是新型绿色数据中心的一大突破方向。在利旧硬件方面，存储资源盘活系统支持异构硬件，集群中的每个Linux操作系统实例可以具有不同的硬件配置，例如不同数量的CPU、不同的内存大小、不同容量的本地硬盘等。SRRS的卷默认自动支持精简配置，提高了存储空间的有效利用。]]></description><category></category></item><item><title><![CDATA[ChatGPT后台揭秘！存储资源盘活系统构建AI时代的存储底座]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/129187207</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/129187207</guid><author>SDSHBlock</author><pubDate>Thu, 23 Feb 2023 18:18:45 +0800</pubDate><description><![CDATA[其中训练集用来估计模型，验证集用来确定网络结构或者控制模型复杂程度的参数，而测试集则检验最终选择最优的模型的性能如何。一个典型的划分是训练集占总样本的50%，而其它各占25%，三部分都是从样本中随机抽取，样本的数据量是非常庞大的，尤其是Midjourney这种需要图片训练的AI，需要PB级的样本数据。总结来说，ChatGPT背后的模型，就是在一个超大语料基础上预训练出的大语言模型（LLM），采用从左到右进行填字概率预测的自回归语言模型，并基于prompting（提示）来适应不同领域的任务。]]></description><category></category></item><item><title><![CDATA[3个命令行就能给机房省电？用户态存储开启节能新思路]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/129066504</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/129066504</guid><author>SDSHBlock</author><pubDate>Thu, 16 Feb 2023 17:48:46 +0800</pubDate><description><![CDATA[另外，SRRS具备不独占硬件资源的特点，可以在不影响现有业务运行的同时将闲置存储资源进行整合，形成统一存储资源池，能够极大程度的提升数据存储的利用率，从而降低能耗。硬件适配方面，SRRS支持ARM和X86双架构并存，利用ARM处理器的低功耗优势可以降低能耗，同时，支持SSD在内的多种存储介质，而SSD可以提供约10倍于HDD的性能，而功耗仅为机械盘存储的50%，有效做到低碳运转。内核态和用户态是什么？在一个软件中，每一条指令都将激活硬件中的某些部件，因此，不同的软件会影响硬件的工作方式，从而影响整体功耗。]]></description><category></category></item><item><title><![CDATA[SRRS推进“云减碳”计划]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/128957749</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/128957749</guid><author>SDSHBlock</author><pubDate>Thu, 09 Feb 2023 17:55:35 +0800</pubDate><description><![CDATA[硬件适配方面，SRRS支持ARM和X86双架构并存，利用ARM处理器的低功耗优势可以降低能耗，同时，支持SSD在内的多种存储介质，而SSD可以提供约10倍于HDD的性能，而功耗仅为机械盘存储的50%，有效做到低碳运转。随着技术发展，数据中心的功率与计算密度激增，随着整体规模的不断扩大，能耗问题日益突出。研究表明，在目前的存储系统中，容量的利用率都不高，以传统磁盘存储为例，考虑到用户数据的不断增长，实际上平均40%-50%的磁盘容量从未被利用过，大量的、宝贵的存储资源被浪费掉了，没有发挥应有的作用。]]></description><category></category></item><item><title><![CDATA[容器时代的存储底座：存储资源盘活系统SRRS]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/128716419</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/128716419</guid><author>SDSHBlock</author><pubDate>Tue, 17 Jan 2023 15:05:58 +0800</pubDate><description><![CDATA[随着随着近几年来云原生生态的不断壮大，云原生技术将有利于更多组织在公有云、私有云和混合云等新型动态环境中，构建和运行可弹性扩展的应用，容器是云原生的服务载体，天翼云将始终坚持核心技术自主研发，不断完善存储产品实力，构建高效易用、安全可控的容器存储底座。虚拟机模仿的是真实的物理硬件，而容器完全是针对云环境设计的。容器与虚拟机的区别可以总结为：虚拟机在云上模拟物理服务器，而容器从设计之初即考虑到云的环境，原生为云而设计，在云上以最佳姿势运行，充分利用和发挥云平台的弹性+分布式优势，即为云原生。]]></description><category></category></item><item><title><![CDATA[利用Kubernetes与SRRS打造云原生基础架构]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/128663508</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/128663508</guid><author>SDSHBlock</author><pubDate>Thu, 12 Jan 2023 17:22:26 +0800</pubDate><description><![CDATA[Kubernetes也称为K8S，其中8是代表中间“ubernete”的8个字符，是Google在2014年开源的一个容器编排引擎，用于自动化容器化应用程序的部署、规划、扩展和管理，它将组成应用程序的容器分组为逻辑单元，以便于管理和发现，用于管理云平台中多个主机上的容器化的应用，Kubernetes 的目标是让部署容器化的应用简单并且高效，很多细节都不需要运维人员去进行复杂的手工配置和处理。也包括没有虚拟机管理程序的服务器，或由 IaaS 公共云平台托管的计算实例上的服务器。]]></description><category></category></item><item><title><![CDATA[解析SRRS：如何盘活存储资源]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/128564673</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/128564673</guid><author>SDSHBlock</author><pubDate>Thu, 05 Jan 2023 15:46:24 +0800</pubDate><description><![CDATA[若使用SRRS与原有业务混合部署，可以不用增加4台服务器，盘活闲置资源，原利用率提到了90%，总功率在10*600W=6000W的基础上略微增加，总能耗降低了约28%，制冷方面的要求也会随之降低约28%，大幅度降低了成本。与此同时，存储能力逐渐地从应用系统中分离出来，形成了专业的存储系统，进而发展成了存储网络。研究表明，在目前的存储系统中，容量的利用率都不高，以传统磁盘存储为例，考虑到用户数据的不断增长，实际上平均40%-50%的磁盘容量从未被利用过，大量的、宝贵的存储资源被浪费掉了，没有发挥应有的作用。]]></description><category></category></item><item><title><![CDATA[存储资源盘活系统助力地方政府推行信创工作]]></title><link>https://blog.youkuaiyun.com/SDSHBlock/article/details/128480977</link><guid>https://blog.youkuaiyun.com/SDSHBlock/article/details/128480977</guid><author>SDSHBlock</author><pubDate>Thu, 29 Dec 2022 14:03:05 +0800</pubDate><description><![CDATA[存储资源盘活系统可基于异构硬件进行部署，兼容x86、ARM、龙芯等平台设备，它作为一组用户态进程运行，不依赖任何特定版本的Linux内核或发行版，不依赖、不修改操作系统环境，不独占整个硬盘，不干扰其他进程的执行。从地方角度，在信创中扮演组织者角色的往往有地方政府、产业联盟、龙头企业、中央政府（指导）。信创建设从关键环节核心组件的自主创新入手，从党政军和关系国计民生的关键行业试点，为国产IT厂商提供实践创新的市场，从而逐步建立自主的IT底层架构和标准，实现IT全产业链实力和结构的优化升级。]]></description><category></category></item></channel></rss>