ceph分布式存储图解与基本概念

别再死记硬背Ceph架构了!用一张图+一个比喻,5分钟搞懂Monitor、OSD和CRUSH 本文通过物流仓库系统的比喻,生动解析了Ceph分布式存储的核心架构,包括Monitor、OSD和CRUSH的协同工作原理。借助一张架构图和实际案例,帮助读者在5分钟内直观理解Ceph的运作机制,提升对分布式存储系统的认知效率。 阅读详情
关于存储需要了解的知识:


带宽:在同一时间点从网络中的某一点到另一点所能通过的最高数据率

可以想象成一个瓶子,瓶子有容量,还有瓶口,瓶口能够出水入水,那个瓶口就是带宽


磁盘纵向扩展与横向扩展

纵向扩展:相当于把瓶子换成一个更大的瓶子,一个瓶口,带宽没变

横向扩展:许多的小瓶子,很多瓶口,带宽变大


介绍

disk:存储盘,互相都是分离的个体

PG:是一个虚拟的概念,并不对应什么实体,一个PG组下对应多个存储实体

深度探索大数据分布式存储的技术奥秘 分布式存储:将数据分散存储在多台独立的服务器(节点)上,通过网络实现节点间的协作,对外提供“单一存储系统”的抽象。维度集中式存储分布式存储容量扩展垂直扩展(升级服务器硬件)水平扩展(增加服务器节点)性能受单服务器IO限制线性扩展(节点越多,总IO越高)可靠性单节点故障导致数据丢失多副本/冗余编码,故障自动恢复成本高端服务器成本高普通服务器“攒机”,成本低从HDFS到Ceph,从Raft到CRUSH,分布式存储的技术在不断进化,但它的本质。 阅读详情

相关推荐

别再死记硬背了!用大白话+图解带你搞懂Ceph的CRUSH算法和心跳机制

本文通过生活化场景类比,深入浅出地解析了Ceph的核心机制——CRUSH算法和心跳机制。CRUSH算法如同智能房产中介,实现数据的负载均衡和容灾分布;心跳机制则像生命监护仪,确保存储节点的健康状态。文章结合实战案例和调优技巧,帮助读者轻松掌握Ceph的底层原理和运维实践。

weixin_30268921的博客 374

手把手图解:当硬盘挂了,Ceph里的4+2纠删码是怎么把数据救回来的?

本文详细解析了Ceph分布式存储系统中4+2纠删码(EC)在硬盘故障时的数据恢复机制。通过对比多副本方案,深入讲解EC如何通过数学冗余实现高效存储和快速恢复,包括故障检测、降级读处理和后台自动修复流程,并提供了性能优化和监控配置的实用技巧。

weixin_30781433的博客 388

当硬盘挂了:图解EC纠删码在Ceph/MinIO里如何自动恢复你的数据

本文深入解析了纠删码(EC)技术在Ceph和MinIO等分布式存储系统中的工作原理与应用实践。通过图解故障恢复流程,详细介绍了EC如何以比多副本更高效的冗余策略保障数据安全,包括分片分布、自动重建机制及生产环境调优建议,帮助运维人员应对硬盘故障等常见问题。

weixin_30443747的博客 404

手把手图解:当Ceph集群一个节点挂了,你的4+2纠删码数据是怎么被读出来的?

本文详细解析了Ceph集群在节点故障时,4+2纠删码(EC)技术如何保障数据读取的完整流程。通过对比多副本机制,EC技术以更低的存储开销和更高的恢复效率,实现分布式存储的高可用性。文章还提供了生产环境中的EC调优实战指南,帮助运维人员优化集群性能。

weixin_30696427的博客 414

Minio与Ceph深度对比:从架构设计到生产环境实战

本文深度对比了Minio与Ceph在架构设计、数据可靠性、生产环境性能及选型决策等方面的差异。Minio以轻量级和快速部署著称,适合中小型团队和边缘计算场景;Ceph则功能全面,适合大规模数据存储和高性能需求。文章还提供了五大关键维度的选型指南,帮助用户根据技术团队能力、硬件资源和特殊场景做出明智选择。

weixin_29235525的博客 390

头歌操作系统2023春季课堂练习2.1:外部中断

本关任务:通过相关知识以及实验回答:版本 1 内核的第 6 次时钟中断发生时,断点和恢复点(指令地址)分别是多少?回答问题:当第一行 0/1 字符全部输出完毕的时候一共发生了几次时钟中断,即第一行完全填满时 jiffies 记录的已发生次数为多少?本关任务:通过实际操作回答在输出第一行 0/1 字符的过程中(如下图所示),共发生了几次时钟中断?2.此时 bochs 虚拟机输出的 0/1 字符串是什么?(只填写数字,不填写空格!根据相关知识进行实际操作,一直输入 c 直到 0/1 将第一行完全填满。

weixin_64821608的博客 8129

手把手学计科--web网页设计

网页的组成:文字、图像和超链接等元素。还可以包括哦音频、视频和动画。分类:静态(固定信息)和动态(与服务器数据库进行实时的数据交换。HTML和CSS 是一种静态网页搭建技术。

Yhvaely的博客 1748

淘特App x-sign参数逆向实战:从抓包到算法定位

本文详细解析了淘特App的x-sign参数逆向过程,从抓包分析到算法定位,涵盖了使用jadx-gui进行静态分析、Frida动态Hook验证以及Native层算法还原等关键技术。文章重点介绍了x-sign参数的生成机制及其在阿里系应用中的安全防护策略,为逆向工程师提供了实用的调试技巧和对抗策略。

5b6n7m8的博客 228

vfsglobal预约系统登录问题全解析(by quqi99)

本文全面解析VFS Global预约系统登录常见问题,包括IP限制、验证码验证失败及账号自动删除等。提供详细的解决方案,如DNS配置、浏览器设置及邮箱选择建议,帮助用户顺利完成签证预约。特别针对中国用户遇到的IP限制问题,给出了实用技巧。

gamma的博客 1341

微带天线理论学习笔记(1)

微带天线的概念是由Deschamps于1953年提出来的,它是在一块厚度远小于工作波长的介质基片的一面敷以金属辐射片、一面全部敷以金属薄层作接地板而成。辐射片可以根据不同的要求设计成各种形状。微带天线具有质量轻、体积小和易于制造等优点,广泛应用于个人无线通信中。

qq_36521926的博客 6227

利用大规模生物活性挖掘,计算识别针对癌基因驱动蛋白 EGFR、BRAF 与 CDK4 的高亲和力抑制剂

背景:精准癌症治疗需要小分子抑制剂与致瘤蛋白靶点之间的精确匹配。方法:我们使用 Python 及 ChEMBL 数据库 API 开发了一套计算流程,系统性地筛选针对 EGFR、BRAF 与 CDK4 的高亲和力配体。对 IC50 < 1000 nM 的生物活性进行过滤,并检索候选化合物的分子结构(SMILES)以供后续优化。结果:本研究共识别出 [插入总数] 种独特化合物。其中,对 BRAF 激酶而言,我们挑选了一批 IC50 低至 6.0 nM 的高效实验性化合物。

u012133341的博客 96

为什么 ChatGPT 生成的下载地址会长成 sky-metal-cards-jerry.quirkypony34.chatgpt.site 这种奇怪的样子

我今天看到的这条地址,确实很容易让人产生一种感觉,ChatGPT 明明只是生成了几张 PNG 图片和一个压缩包,为什么最终拿到的却不是类似这种看起来很正规的下载链接,而是一长串带有、UUID、apidecks的地址。更容易让人疑惑的是,其中还出现了一个平时很少见到的域名。这并不是浏览器随机生成的临时 URL,也不是某个来历不明的第三方文件服务器。根据 OpenAI 在 2026 年公布的 ChatGPT Sites 文档和相关服务条款,

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 64

【Docker】常见容器问题解决#OCI runtime create failed: container_linux.go:349: starting container process

ERROR: for nginx Cannot start service nginx: OCI runtime create failed: container_linux.go:349: starting container process caused "process_linux.go:449: container init caused \"rootfs_linux.go:58: mounting \\\"/data/docker-compose/n

liu_chen_yang的博客 5528

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

上一篇: 文件存储,块存储,对象存储的区别
下一篇: ceph中monitor节点基本解释与图解
不想飞的狗
博客等级 码龄9年 160粉丝 106原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值