
存储
文章平均质量分 86
架构师技术联盟(Hardy)
这个作者很懒,什么都没留下…
展开
-
从算力到存力:存储芯片研究框架(2023)
1、ChatGPT加速计算服务器时代到来 2、旧格局与新秩序:国产架构服务器研究框架 3、服务器系列(1)下游需求多点开花,行业拐点即将来临 4、服务器系列(2)从白牌崛起、品牌求变,探究云计算厂商核心需求 5、2022年国产服务器CPU研究框架。HBM/DRAM:作为存储器主流之一的DRAM技术不断升级,衍生出HBM(高带宽内存),其是一款新型的CPU/GPU 内存芯片,将多个DDR芯片堆叠后与GPU封装在一起,实现大容量,高位宽的DDR组合阵列, 突破内存容量与带宽瓶颈。原创 2023-04-06 16:50:21 · 1626 阅读 · 0 评论 -
Ceph分布式存储系统优化分析
前篇文章“Ceph分布式存储系统架构研究综述”重点分析了Ceph分布式存储系统架构,今天接着Ceph话题,继续分享Ceph常见的系统和性能优化技术。Ceph支持多种存储访问接口,现有的多种性能测试工具都可用于Ceph的性能测试,如测试块接口性能的fio,iometer等;测试CephFS接口的filebench,fio等;测试对象接口的cosbench等。Ceph有专用的基准测试集CBT,其包含radosbench,librbdfio,kvmrbdfio和rbdfio。radosbenc...转载 2021-07-04 08:32:49 · 933 阅读 · 0 评论 -
什么是SMR磁盘?解读基于西部数据SMR的归档存储
Hardy架构师技术联盟8月6日,UCloud联合西部数据正式发布新一代归档存储产品,该产品采用UCloud全新自研存储架构和西部数据的高密JBOD机型和SMR(叠瓦式磁记录硬盘)盘。新一代归档存储具备标准存储的可靠性,同时降低80%的存储成本,该产品提供最低价格的冷数据存储解决方案。根据IDC的预测,在数字经济的浪潮之下,随着5G、AI、物联网等技术发展,全球年新增数据量到2025年将达175ZB,如果用市面上主流的8T硬盘来存储这些数据,需要230多亿块硬盘,如果每块硬盘的...原创 2020-08-08 10:13:24 · 3115 阅读 · 0 评论 -
不谈DSSD,谈谈Xyrate和希捷
DSSD出师未捷身先死,一个架构新颖、设计高端、性能牛掰、时延空前的产品已经离我们而去,只因时代发展太慢,产品生不逢时,乱世出英雄,乱世也可以埋没英雄。话说DSSD技术还在,是呀,一个宣传如此之久、耗资数以十几亿计产品曾在存储路上走过,那肯定要留点什么下来,否则岂不就如同打个水漂,不留下一点涟漪吗。原创 2017-03-07 22:10:18 · 1191 阅读 · 0 评论 -
[女神节] 请收下为您精选的节日礼物
节日将至,架构师技术联盟微信公众号为广大读者精选技术文章,作为女神佳节的精美礼物,略表寸心,请果断收下吧。2017年我们一起携手共进,继续努力,希望无论在工作还是生活上都再创新高,希望每位都能赢取白富美,出任董事长,走向人生巅峰。原创 2017-03-07 23:04:33 · 955 阅读 · 0 评论 -
DIX和DIF该诉你,什么叫端到端数据一致性
我们跟数据打交道的人都应该知道,数据在存储系统传输中,经过了多个部件、多种传输通道和复杂的软件处理过程,其中任意一个环节发生错误都可能会导致数据错误。但是这种错误一般无法被立即检测出来,而是后续通过应用在访问数据过程中,才发现数据已经出错,这种数据很难在数据发生错误那一刻被检查出来的错误,我们称为静默数据破坏,即Silent Data Corruption。原创 2017-03-12 22:20:44 · 14519 阅读 · 3 评论 -
HP忆阻器内存和IBM原子磁盘双剑合璧会怎么样
HP的忆阻器内存技术和IBM的原子磁盘技术给我们带来很多遐想,按照HP的愿景,未来忆阻器内存技术、硅光通信互联被运用在服务器、工作站、PC或是手机、平板计算机等移动运算终端,我们购买手机时关注的重点可能仅仅是外观。又或IBM原子存储大量应用在企业存储、云存储等产品,我们根本不会因为数据中心空间占用、耗电和冷却成本而担忧。立足现状,虽然实验室都已经有了原型产品,但这些技术是像Flash技术在短短几年主导存储技术潮流,还是昙花一现?相信时代和自然法则会告诉我们答案。原创 2017-04-07 22:32:28 · 1403 阅读 · 0 评论 -
NetApp备份之SnapVault和SnapDiff技术
在云计算大潮流下,关于数据备份,人们往往会追求开放,接口标准化和通用化产品,这样可以极大降低客户管理和运维成本。但标准化的东西往往在执行效率和性能上往往有很大损失,这就需要我们在实际应用中进行取舍,之前分享过开放的无代理备份方案,详情具体参考无代理备份或将成为云备份不二之选。今天我们来介绍下在备份软方案中少见的私有备份技术。原创 2017-03-24 21:08:42 · 3705 阅读 · 0 评论 -
数据湖(Data Lake)前世今生解析(上)
EMC收购视频存储设备厂商Isilon Systems完善EMC在分布式Scale-Out架构NAS技术方面的不足,近几年isilon在媒资、大数据和HPC场景得到客户的一致认可,也在去年和另外一个产品线Povital Hadoop推出了数据湖解决方案,应对互联网浪潮下客户对半结构化和非结构化数据的处理、存储需求。原创 2015-12-25 21:44:00 · 15762 阅读 · 0 评论 -
数据湖(Data Lake)前世今生解析(下)
近日EMC发布了数据湖2.0策略,新一代Isilon横向扩展NAS数据湖产品横跨边缘、核心和云实现数据高弹性流动;并将在2016年初推出对应的Isilon软件产品:Isilon SD Edge、下一代Isilon操作系统Isilon OneFS.Next和Isilon CloudPools全面进入“数据湖2.0”时代。原创 2015-12-25 21:46:19 · 5911 阅读 · 0 评论 -
HPE收购很忙,不如一起来聊聊Nimble Storage
关于HPE收购Niuble storage的消息已经不是什么头条新闻了,今天写这篇文章的目的不是聊八卦,而是多来点干货。在某种意义上,HPE可以说是收购、拆分、合资商业公司运作集一身的典型代表。关于HPE最近动态请参阅HPE牵手CSC打造DXC延承HP百年家规,HPE最近的一次有关存储的收购就是Simplivty,至此,HPE缺少的存储产品就是Original AFA产品和SDS controller方案了。原创 2017-03-08 22:59:48 · 10237 阅读 · 0 评论 -
Google揭露SHA-1碰撞,加速数据重删字节对比
近期,Google和道荷兰阿姆斯特研究者宣布攻破了世界上第一例公开的SHA-1哈希碰撞实例,业界一片哗然。当两组不同的数据(文件、一段数据)计算出相同的Hash值时,即视为二者发生碰撞;很多声音强调了避免使用SHA-1的必要性。Google自己多年来也是一直主张弃用SHA-1方案,让更多人意识到其已经不再安全可靠。原创 2017-02-24 23:20:13 · 2767 阅读 · 0 评论 -
DAS存储未死,再次欲获重生
当我们回顾存储发展形态时,我们会想到DAS是最原始最基本的存储方式,在个人电脑、服务器等低端市场和场景上随处可见。存储的原始形态也来自于DAS,常见的用于连接DAS和主机系统的协议/标准主要 有ATA、SATA、eSATA、SCSI、SAS和FibreChannel等。原创 2017-02-15 21:22:21 · 2452 阅读 · 1 评论 -
详解HPE 3PAR StoreServ NAS存储方案
HPE 3Par的NAS方案目前主要有两种选择(主要是NAS部分,SAN存储都一样),一种是SAN+NAS网关(3PAR StoreServ File Controller),另一种是一体化存储(类似华为V3、Netapp FAS系列);通过HPE 3PAR File persona software套件支持NAS 对象功能。原创 2017-01-24 23:55:29 · 22904 阅读 · 2 评论 -
IBM Spectrum Scale技术和架构详解
2016年为止,IBM高端存储最新产品为DS8884、DS8886和DS8888。闪存系统最新产品,以FlashSystem 900为硬件基础,包装了Flash System V9000、A9000和A9000R,今天我们重点讨论下IBM Spectrum Scale软件定义存储产品。原创 2017-01-24 23:54:08 · 7647 阅读 · 0 评论 -
五家公司纷抢,东芝存储花落谁家
目前存储半导体业务(磁盘)是东芝的最后一个王牌业务,存储芯片业务给东芝带来最大的收益来源,其中存储芯片包括NAND型闪存,市场份额仅次于韩国三星电子,位居全球第2位。因财务造假深陷亏损,继出售家电、医疗等业务之后,东芝重组后的王牌业务存储芯片业务也面临出售。原创 2017-02-12 17:41:55 · 2170 阅读 · 0 评论 -
NAS为什么是HPC系统的标配
NAS为什么是HPC系统的标配原创 2017-02-19 14:09:47 · 1908 阅读 · 0 评论 -
用“8”个字谈谈华为Dorado V3产品和技术
前不久华为发布Dorado V3全闪存产品,很多专业媒体和自媒体对该产品进行了全方位报道,听闻该产品采用了很多如NVMe、LDCP算法、FlashLink等新技术,所以我也是抱着好学的态度和对技术的热情一一拜读了技术相关文章。细读后发现,关于该产品技术解读却少之又少,后来通过一次技术交流才算对该产品有了比较深入的了解。今天我就把近期所学进行总结并分享给大家,通过技术和产品分析,让大家对Dorado V3及全闪产品也有深入了解。原创 2017-04-15 08:51:32 · 5316 阅读 · 0 评论 -
谈谈HPC可否掀起下一轮技术热潮
需求的膨胀推动着技术变革,技术的革新进一步丰富着我们的生活,如今大数据、云计算技术已经自身疲惫了。然而跨界竞争和技术融合迫使我们不断换血和补充能量来适应一次次变革。那么在人工智能、虚拟现实、物联网等技术热潮过后,能预测到的下一个技术热点会是什么,高性能计算(HPC)?面对技术和行业融合现状,HPC应该再适合不过了,另外,我也倾向于把HPC看作是一种跟各个行业比较紧密结合的技术。原创 2017-05-26 22:53:58 · 3279 阅读 · 1 评论 -
InfiniBand技术和协议架构分析
一方面Infiniband在主机侧采用RDMA技术释放CPU负载,可以把主机内数据处理的时延从几十微秒降低到1微秒;另一方面InfiniBand网络的高带宽(40G、56G和100G)、低时延(几百纳秒)和无丢包特性吸取了FC网络的可靠性和以太网的灵活扩展能力。原创 2017-06-06 20:54:16 · 35978 阅读 · 2 评论 -
美国Gartner权威报告揭露华为技术(18个)实力有多强?
其实,华为技术不仅仅是聚焦运营商BG,还有企业BG、消费者BG(大家最熟悉的手机等终端业务)和公有云BU。关于华为技术如何,最近网上纷纷攘攘,各种说辞应有尽有。由于我对华为企业BG相对比较熟,所以只能站在企业角度,通过拿美国第三方咨询机构Gartner报告来谈谈,尽量通过第三方机构来证明,可能更具有说服力。简单说说Gartner象限,Gartner魔力四象限主要从执行力和技术前瞻性两个维度...原创 2018-12-15 20:48:59 · 1768 阅读 · 0 评论 -
架构师知识星球重磅上线通知
新老朋友们,本号推出的知识星球上线了。这是专业的垂直技术讨论学习平台,可以上传文件、发表观点、知识点,点对点提问,应答等。针对历史内容,方便搜索相关讨论主题问题和对应答案。 知识星球比微信群更聚焦、更专业,平台推荐付费星球形式,其目的就是把真正想学习的技术相关者聚在一起(有效规避广告者和垃圾信息),在这里,每个相关问题都将获得答案,回答者也有机会得到相应奖赏。 ...原创 2018-09-23 10:18:16 · 939 阅读 · 0 评论 -
架构师技术精华文章汇总
为了便于读者阅读架构师技术联盟公众号历史文章,故在此进行分类和持续更新,请本号的读者按需进行查阅。谈谈系统架构>备份软件体系架构解析>顶级架构师应该知道的99件事>网管到首席架构师之路>如何才能成为出色的架构师>告诉你什么叫别人家的架构师>XenServer虚拟化技术架构>大型网站架构演变和知识体系>SDN和OpenFlow架构分析高性能...原创 2018-07-07 11:23:09 · 2822 阅读 · 2 评论 -
CDM技术分析和产品选型建议
数据副本管理(CDM)是一种节约存储资源,有效管理数据生命周期的方法,包括消除不必要的重复生产数据。传统备份软件和企业应用程序独立运行,经常会创建多个相同数据的副本。然而,相同数据的冗余副本不但浪费存储空间,还降低网络性能,使数据访问或恢复关键数据任务更加困难。CDM软件可以通过减少使用数据虚拟化的完整副本的数量来帮助消除这些问题。 CDM工作机制和原理 大多数CDM管理软件...原创 2018-04-05 10:45:00 · 2131 阅读 · 0 评论 -
谈谈存储即服务(STaaS)解决方案具有什么优势?
Hardy 架构师技术联盟数据是客户宝贵的财富,但传统数据存储盒子和数据管理却是十分复杂的,我们跟很多客户交流时,客户普遍认为在业务发放和设备管理中,经常会面临下面问题。1、利用率低、管理复杂:在传统数据中心,存储设备种类多、管理复杂;业务与存储系统之间难以匹配,通常只能以超配来确保存储满足业务应用的需求,导致资源利用率低。2、数据系统杂乱、难以云化:传统数据系统缺乏对存储进行服务等级定义和衡量,...原创 2018-03-06 21:52:25 · 1958 阅读 · 1 评论 -
NAND Flash SSD 是如何生产出来的?
NAND Flash是一种非易失性随机访问存储介质,基于浮栅(Floating Gate)晶体管设计,通过浮栅来锁存电荷,电荷被储存在浮栅中,它们在无电源供应的情况下仍然可以保持。关于NAND Flash技术基本原理之前有过讲解,大家可以参考文章闪存技术最全面解析。今天主要讨论下NAND Flash生产过程、架构和关键指标。NAND Flash是从原始的硅材料加工出来的,硅材料被加工成晶圆(Waf原创 2017-12-24 09:56:37 · 4064 阅读 · 0 评论 -
从Kaminario谈谈“三大”存储热点技术
之前分析了很多被收购的初创存储公司,发现他们的存储产品基本上具备以下三大存储热点技术,作为敲门砖找到了好的归属。但是通过阅读这篇文章,你会发现,这三大存储技术也并非是初创存储公司的专属能力。原创 2017-09-08 22:48:23 · 2520 阅读 · 0 评论 -
谈谈刚被西数吞并的闪存公司——Tegile System
当每次有存储厂商别收购后,我都要怀念一下这些存储厂商身前具有核心技术和产品,但相比之前被收购的存储厂商,这次写的简单多了,主要是加班太多,挤时间太难。每个厂商看似雷同的产品,实际上都有自己的特点和特别之处,抛开资本运作层面的东西,当你细细回想一下这些技术的差异和不同,会有很多不同收获和感触。原创 2017-09-03 20:03:28 · 2245 阅读 · 0 评论 -
双活解决方案如何部署“应用”双活?
存储双活已家喻户晓人人皆知,但是,你知道存储双活+虚拟化+应用集群,应该如何部署呢?在“数据中心双活该如何构建”文章中,谈到要构建从应用、服务器、网络到存储的端到端双活,必须要求端到端每个部件支持双活才可以。但由于很多应用不支持集群部署,这种情况只能从网络和存储层,或通过服务器虚拟化软件HA功能实现双活;今天重点聊聊基于虚拟机软件的应用该如何部署双活。原创 2017-08-04 21:22:06 · 23979 阅读 · 1 评论 -
Ceph vs Gluster之开源存储力量的较量
Ceph和Gluster是Red Hat旗下的成熟的开源存储产品,Ceph与Gluster在原理上有着本质上的不同。原创 2017-08-09 19:43:18 · 12173 阅读 · 0 评论 -
从Intel Optane SSD和DIMM谈全闪存性能优化
使用ColdStream作为数据读缓存,通过使用有效的热点识别、顺序流识别和精准冷数据淘汰算法,可识别95%以上的热数据。将这些热数据进行缓存之后,相比无读缓存,在热点场景下(如OLTP)的平均读时延会显著降低。据了解,目前该技术已经在华为实验室中得到全流程的验证,商业产品将在明年正式问世。原创 2017-08-16 22:10:25 · 12376 阅读 · 0 评论 -
谈谈我们熟悉但未必了解的磁带库
谈起物理带库大家都不陌生,但未必真正了解。她在备份领域它以终为始,时至今日我们依然可以看到带库的踪影;但是随着云备份、对象存储产品和技术的普及,物理带库的市场将变得越来越小;正因为如此,我们对物理带库技术和产品了解是比较有限的。我个人认为纵观备份历史,备份(一般用于离线备份)缺少物理带库似乎是不完整的,所以今天谈谈物理带库,也算是对我之前备份系列文章“一文深度全解备份解决方案知识”的完善和补充。原创 2017-07-22 22:26:36 · 20763 阅读 · 5 评论 -
Violin Memory公司被收购后留下那些技术
据悉前不久,濒临破产的美国闪存存储供应商Violin Memory公司已经被索罗斯基金管理公司旗下的私人投资基金厂商量子伙伴基金(Quantum Partners Inc) 公司收购。原创 2017-06-03 14:21:13 · 1609 阅读 · 0 评论 -
EMC、Pure和NetApp推新品,NAS闪存场景在哪里
今天我们来看看Purestorage 的FlashBlade SSD NAS产品,EMC Isilon All Flash,以及基于传统Data ONTAP推出的All Flash FAS A系列SSD NAS产品。原创 2017-02-27 21:41:05 · 3925 阅读 · 0 评论 -
vSAN6.5解耦vSphere让存储更任性
vSAN跟随着 vSphere 6.5 的正式发布了vSAN 6.5 版本,该版本不但增加了不少新功能,而且进一步完善了 vSAN 的应用场景。最值得关注的就是vSAN成为了传统的iSCSI存储,再也不需绑着vSphere一起销售了,也可以直接给物理服务器上的应用负载提供专业存储服务。原创 2017-01-10 20:41:00 · 7107 阅读 · 1 评论 -
【精华】构建闪存系统和生态环境
每种技术和产品的出现都是为了满足时代的某种需求,当然闪存也毫不例外。闪存出道进入大众视野时,人们更多的认为它是划分存储厂商类型的一个代言词,也使得闪存厂商成为一个刚刚降温的热词,如今闪存技术已经迅速发展为存储厂商必须具备基本技术。此刻正是闪存串红并登上历史舞台指点江山、激扬文字的时刻,闪存(NAND Flash)的每一个细微动作都牵动着千万颗客户热血沸腾的心。原创 2016-08-31 21:14:19 · 1643 阅读 · 0 评论 -
【备份专题】备份软件体系架构解析
从今天开始,我将陆续分享有关备份架构和特性系列知识,数据保护方案目前主要分了两大类,一类是备份,另一类是容灾。备份主要是对数据提供多副本冗余,当数据发生误操作、病毒感染和丢失等逻辑错误后,可以用备份副本进行恢复,保证数据少丢失或甚至不丢失,CDP也是一种实时数据备份技术。原创 2016-09-11 12:17:33 · 4253 阅读 · 0 评论 -
容器定义存储(CDS)—春江水暖"Portworx"先知
在上篇中,我们已经介绍了容器如何改变应用部署方式、为什么要通过CDS实现数据中心"轻量化"。那今天我们就来分析一下基于容器的Portworx存储、一个基于数据和控制面的容器定义存储技术和产品。原创 2016-09-10 00:03:28 · 9730 阅读 · 1 评论 -
容器定义存储(CDS)—存储技术的"瘦身"革命
容器技术是最快被数据中心所广泛接受和采用的技术之一,从2013年起,据统计Docker的下载量已经快达到30亿次,容器已经彻底改变了应用部署方式,但是IT基础设施的管理却没有及时跟上。原创 2016-09-10 00:06:04 · 4607 阅读 · 1 评论 -
【Ceph专题】 Ceph架构详细分析
Ceph是呼声很高的开源分布式的SDS产品存储系统。同时提供对象存储、块存储和文件系统存储三种功能,满足不同应用需求。Ceph使用C++语言开发,遵循LGPL协议开源。原创 2016-08-22 21:51:36 · 7644 阅读 · 0 评论