Ceph: A Linux petabyte-scale distributed file system

最新推荐文章于 2025-11-24 18:02:47 发布
转载 最新推荐文章于 2025-11-24 18:02:47 发布 · 787 阅读 · 0
文章标签：

#linux #file #system

Ceph 是一种分布式文件系统，它集成了复制和容错功能，同时保持了 POSIX 兼容性。本文探讨了 Ceph 的架构，并介绍了它是如何提供容错能力并简化大规模数据管理。

 

Summary:  Linux® continues to invade the scalable computing space and, in particular, the scalable storage space. A recent addition to Linux's impressive selection of file systems is Ceph, a distributed file system that incorporates replication and fault tolerance while maintaining POSIX compatibility. Explore the architecture of Ceph and learn how it provides fault tolerance and simplifies the management of massive amounts of data

 

ref:http://www.ibm.com/developerworks/linux/library/l-ceph/index.html?ca=dgr-lnxw01CEPHdth-LX

 

centos-release-ceph-nautilus-1.2-2.el7.centos.x64-86.rpm.tar.gz
01-22
在本例中，涉及的压缩包文件名为 "centos-release-ceph-nautilus-1.2-2.el7.centos.x64-86.rpm.tar.gz"，意味着该压缩包包含了一个用于CentOS 7的RPM安装包，其中包含了Ceph Nautilus版本的相关组件。Ceph是一个开源...
ceph-radosgw-10.2.10-0.el7.x86_64.rpm
12-18
官方离线安装包，亲测可用。使用rpm -ivh [rpm完整包名] 进行安装
笔记：Ceph: A Scalable, High-Performance Distributed File System
weixin_34217711的博客
08-28 454
关于Ceph的名篇。Ceph是现在很火的一个存储系统，不同于HDSF主要是面向大数据应用，Ceph是立志要做一个通用的存储解决方案，要同时很好的支持对象存储(Object Storage)，块存储(Block Storage)以及文件系统(File System) 。现在很多Openstack私有云的存储都是基于Ceph的。Ceph就是基于这篇论文做得。...
分布式元数据论文阅读笔记整理（持续更新）
重新开始写博客
12-19 3492
阅读分布式元数据论文，整理其目标、挑战、创新点、局限性
Ceph：一个 Linux PB 级分布式文件系统
liwg06
02-20 315
Linux®持续不断进军可扩展计算空间，特别是可扩展存储空间。Ceph 最近才加入到 Linux 中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护 POSIX 兼容性的同时加入了复制和容错功能。探索 Ceph 的架构，学习它如何提供容错功能，简化海量数据管理。
分布式系统distributed-system资料
思索的IT脚印
11-05 2143
分布式系统(Distributed System)资料 希望转载的朋友，你可以不用联系我．但是一定要保留原文链接，因为这个项目还在继续也在不定期更新．希望看到文章的朋友能够学到更多． 《Reconfigurable Distributed Storage for Dynamic Networks》 介绍:这是一篇介绍在动态网络里面实现分布式系统重构的paper.论文的作者(导师)
[转]Ceph：OpenStack标配&Linux PB级分布式文件系统详解
heiyeluren的blog（黑夜路人的开源世界）
05-09 7107
Linux®持续不断进军可扩展计算空间，特别是可扩展存储空间。Ceph 最近才加入到 Linux 中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护 POSIX 兼容性的同时加入了复制和容错功能。探索 Ceph 的架构，学习它如何提供容错功能，简化海量数据管理。
分布式系统(Distributed System)资料
尹成的技术博客
05-26 5330
分布式系统(Distributed System)资料《Reconfigurable Distributed Storage for Dynamic Networks》介绍:这是一篇介绍在动态网络里面实现分布式系统重构的paper.论文的作者(导师)是MIT读博的时候是做分布式系统的研究的,现在在NUS带学生,不仅仅是分布式系统,还有无线网络.如果感兴趣可以去他的主页了解.《Distributed...
【开源分享】深入研究 kvm,ceph,fuse特性，包含开源项目，代码案例，文章，视频，架构脑图等
a410974689的博客
02-18 1543
一、KVM 文档 官方文档: 官方网址：https://www.linux-kvm.org/page/Main_Page Avi Kivity 在Linux 内核中的邮件: http://lkml.iu.edu/hypermail/linux/kernel/0610.2/1369.html KVM 博客：http://planet.virt-tools.org/ KVM 论坛：https://events.linuxfoundation.org/kvm-forum/ 其他文档： Linux_2_6_20
Ceph：一个开源的 Linux PB 级分布式文件系统
Langeldep的专栏
06-29 3239
本文为IBM的技术写的文章，收藏研究探索 Ceph 文件系统和生态系统M. Tim Jones, 自由作家简介： Linux®持续不断进军可扩展计算空间，特别是可扩展存储空间。Ceph 最近才加入到 Linux 中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护 POSIX 兼容性的同时加入了复制和容错功能。探索 Ceph
Ceph:一个 Linux PB 级分布式文件系统
weixin_34061555的博客
02-01 134
Ceph：一个 Linux PB 级分布式文件系统 探索 Ceph 文件系统和生态系统 M. Tim Jones, 自由作家 简介：Linux®持续不断进军可扩展计算空间，特别是可扩展存储空间。Ceph 最近才加入到 Linux 中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护 POSIX 兼容性的同时加入了复制和容错...
Cpeh论文阅读翻译：Ceph: A Scalable, High-Performance Distributed File System
qq_67736058的博客
07-19 730
初学ceph经典论文翻译
精选资源
centos-release-ceph-nautilus-1.2-2.el7.centos.noarch.rpm
12-04
离线安装包，亲测可用
精选资源
ceph-mgr-dashboard-14.2.7-0.el7.noarch.rpm
12-10
离线安装包，亲测可用
Linux_14（多线程）线程控制+C++多线程
2401_87986548的博客
11-24 985
本文介绍了Linux线程控制的关键概念和操作。主要内容包括：1）线程创建（pthread_create）的参数和使用方法；2）线程结束的三种方式（pthread_exit、return和pthread_cancel）；3）线程等待（pthread_join）的必要性和实现机制；4）线程tid的本质是共享区TCB结构体地址；5）线程局部存储（__thread）实现线程独享全局变量；6）线程分离（pthread_detach）实现自动释放资源。文章还通过代码示例演示了C++多线程本质是对pthread的封装。这
【Linux】UDP
x_2023_713的博客
11-23 968
UDP编程的核心是“简单高效”，适合对实时性要求高、可容忍少量数据丢失的场景。
【Linux】从条件变量到信号量｜环形队列版生产者 - 消费者模型实战（附完整源码）
欢迎来到我的博客，私信我可以一起交流技术
11-23 915
前言：欢迎各位光临本博客，这里小编带你直接手撕**，文章并不复杂，愿诸君**耐其心性，忘却杂尘，道有所长！！！！在多线程编程中，同步与互斥是核心问题。本文将从条件变量、阻塞队列入手，逐步深入到POSIX信号量，并最终实现一个基于环形队列的生产者-消费者模型，展示不同同步机制的应用场景与实现细节。条件变量是线程间同步的基础工具，用于线程间的“等待-通知”机制。你可以把它想象成一个“消息板”，线程A在上面等待一个消息（条件满足），线程B在条件满足时在消息板上发布通知，唤醒线程A。这是条件变量最基础的实现，包含了
详解Linux系统配置 rm 命令安全删除文件(Linux Mint, CentOS, RHEL, OpenEuler等系统服务器配置)
最新发布
Mr.L-OAM的博客
11-24 94
在Linux Mint,CentOS, RHEL,OpenEuler系统中，可以通过多种方式将rm -rf命令改为将文件移动到回收站而非永久删除：安装trash-cli工具并使用trash-put替代rm命令；创建bash别名将rm重定向到trash-put；使用图形化文件管理器(Nemo)的删除功能；创建自定义安全删除脚本；使用系统自带的gvfs-trash命令。此外，还提供了完整的回收站管理方案，包括文件列表查看、恢复、定期清理等功能，通过trash-manager脚本实现自动化回收站管理，防止误删。
【Linux 进程管理】事件循环与多线程：Linux与RTOS的比较与实践
love131452098的博客
11-24 639
摘要：本文对比了事件循环与多线程在Linux和RTOS中的适用场景。单线程事件循环在高并发I/O场景下更高效稳定，利用epoll/io_uring降低开销；多线程适合CPU密集型任务。RTOS中单任务循环适合简单实时系统，多任务适合并行需求场景。文章分析了各自的优势、风险及治理方案，并给出选型建议：I/O密集用事件循环，CPU密集用线程池，关键实时路径用高优先级任务。最后提供了性能优化清单和监控指标，强调非阻塞I/O、背压控制和批处理等关键技术。
2025-03-29 10:14:00.654114 I | op-mgr: deployment for mgr rook-ceph-mgr-a already exists. updating if needed 2025-03-29 10:14:00.660132 I | op-k8sutil: deployment "rook-ceph-mgr-a" did not change, nothing to update 2025-03-29 10:14:00.660179 I | cephclient: getting or creating ceph auth key "mgr.b" 2025-03-29 10:14:00.918206 I | op-mgr: deployment for mgr rook-ceph-mgr-b already exists. updating if needed 2025-03-29 10:14:00.922071 I | op-k8sutil: deployment "rook-ceph-mgr-b" did not change, nothing to update 2025-03-29 10:14:02.012907 E | ceph-cluster-controller: failed to reconcile CephCluster "rook-ceph/rook-ceph". failed to reconcile cluster "rook-ceph": failed to configure local ceph cluster: failed to create cluster: failed to start ceph mgr: failed to enable mgr services: failed to enable service monitor: service monitor could not be enabled: failed to retrieve servicemonitor. servicemonitors.monitoring.coreos.com "rook-ceph-mgr" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" in the namespace "rook-ceph" 2025-03-29 10:14:02.052359 E | ceph-spec: failed to update cluster condition to {Type:Ready Status:True Reason:ClusterCreated Message:Cluster created successfully LastHeartbeatTime:2025-03-29 10:14:02.048230153 +0000 UTC m=+9812.323876586 LastTransitionTime:2025-03-29 08:40:15 +0000 UTC}. failed to update object "rook-ceph/rook-ceph" status: Operation cannot be fulfilled on cephclusters.ceph.rook.io "rook-ceph": the object has been modified; please apply your changes to the latest version and try again 2025-03-29 10:25:15.419892 E | ceph-nodedaemon-controller: node reconcile failed: failed to enable service monitor: service monitor could not be enabled: failed to retrieve servicemonitor. servicemonitors.monitoring.coreos.com "rook-ceph-exporter" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" in the namespace "rook-ceph" 2025-03-29 10:25:16.017269 E | ceph-nodedaemon-controller: node reconcile failed: failed to enable service monitor: service monitor could not be enabled: failed to retrieve servicemonitor. servicemonitors.monitoring.coreos.com "rook-ceph-exporter" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" in the namespace "rook-ceph" 2025-03-29 10:25:18.622406 E | ceph-nodedaemon-controller: node reconcile failed: failed to enable service monitor: service monitor could not be enabled: failed to retrieve servicemonitor. servicemonitors.monitoring.coreos.com "rook-ceph-exporter" is forbidden: User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" in the namespace "rook-ceph"
03-30
User "system:serviceaccount:rook-ceph:rook-ceph-system" cannot get resource "servicemonitors" in API group "monitoring.coreos.com" ``` 服务账号 `rook-ceph-system` 缺少操作 `servicemonitors` 资源的...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值