ceph-immmutable-object-cache

于 2020-02-04 10:26:38 发布
阅读量299 收藏
点赞数
分类专栏： 云计算 程序员
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/java06051515/article/details/104166055
版权
本文介绍了Ceph的ceph-immmutable-object-cache守护进程，它将内容缓存到本地SSD以提高性能。守护进程通过域套接字与librbd客户端交互，实现读取操作的本地缓存。当缓存满时，采用LRU策略进行剔除。文件名以pool、namespace、snap_id和oid组合，通过CRC32c散列确定存储位置。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

一、简介

目前官方提供了ceph-immmutable-object-cache守护进程负责将内容缓存到本地缓存目录上。为了获得更好的性能，建议使用SSD作为底层存储介质。

二、IO流程

在这里插入图片描述

ceph-immmutable-object-cache守护进程启动进行初始化，并且时监听本地域套接字，并等待来自librbd客户端的连接。
客户端librbd通过域套接字来连接缓存守护进程， 并且向缓存守护进程进行注册。
客户端librbd读取时请求到缓存守护进程进行查找。如果未查找到，守护进程会直接读取RADOS对象，然后写入到本地缓存目录.否则，找到更新LRU移动到头部。
如果返回告诉客户端未缓存， 则客户端librbd直接从rados中获取信息。(下次librbd则直接从本地获取)
在这里插入图片描述

三、策略
MAP信息维护filename和Entry信息。

在这里插入图片描述

LRU链表维护Entry信息，保证容量达到阈值剔除缓存。

在这里插入图片描述

Entry信息

最低0.47元/天 解锁文章
博客
Kafka生产者的一个Bug会导致部分消息一直无法发送
11-10 1893
Node-0 准备开始遍历它下面的几个队列中的ProducerBatch，遍历一次 则drainIndex+1,发现遍历了一个队列之后,就装满了这一批次的请求。因为发送一次的请求量是有限的(max.request.size), 所以一次可能只能发几个ProducerBatch. 那么这次发送了之后, 需要记录一下这里是遍历到了哪个Batch, 下次再次遍历的时候能够接着上一次遍历发送。那么开始遍历Node-1，这个时候则drainIndex=1，首先遍历到的是 第二个TopicPartition。
博客
NVIDIA A100 深度解密（一）：GPU 峰值计算那些事
09-17 1642
1、背景介绍2020 年 5 月 14日，NVIDIA 创始人兼首席执行官黄仁勋在自家厨房直播带货，哦不对应该是 NVIDIA GTC 2020 主题演讲中热情洋溢地介绍了新鲜出炉的基于最新 Ampere 架构的 NVIDIA A100 GPU，号称史上最豪华的烧烤。NVIDIA A100 Tensor Core GPU 基于最新的 Ampere 架构，其核心为基于台积电 7nm 工艺制造的 GA100，内有 542 亿晶体管，裸片尺寸为 826mm^2，而前代 GV100 裸片尺寸 815mm^2，
博客
免费测试｜滴滴云开放基于NVIDIA A100的GPU裸金属服务器测试
09-10 544
免费测试｜滴滴云开放基于NVIDIA A100的GPU裸金属服务器测试北京时间9月1日起，企业用户可申请测试滴滴云基于NVIDIA A100 GPU的裸金属服务器产品，有意向的企业用户扫描文末二维码，联系滴滴云同学申请测试吧～NVIDIA A100 GPU介绍NVIDIA A100融合了超540亿个晶体管，是目前全世界最大尺寸的7nm制程处理器，内有6912个CUDA核心、40GB运行内存，以及内存网络带宽达1.6TB/s，张量计算核心内容性能大幅度提高，TF32性能达156万亿次/秒，如果利用稀疏性
博客
GRPC连接池的设计与实现
12-30 4325
前言在分布式高并发服务器中，client到server以及server中的多个节点之间的连接往往使用连接池来管理。简单来说就是将提前创建好的连接保存在池中，当有请求到来时，直接使用连接池中的连接对server端访问，省去了创建连接和销毁连接的开销(TCP建立连接时的三次握手和释放连接时的四次挥手)，从而提高了性能。目录设计原则基本原理GRPC特性GRPC调优实现细则延伸阅读设...
博客
突破 0 和 1 的思维：量子计算介绍
12-25 2179
突破 0 和 1 的思维：量子计算介绍1 什么是量子计算？量子计算是一种使用量子逻辑进行通用计算的方法，被普遍认为是一种更新型的计算机技术。在传统计算机中，信息量的基本单位是比特，它只能取 0 或 1 中的一个值。在量子计算机中，信息量的基本单位为量子比特或量子位。通过量子力学现象，这些量子位可以同步进行大量计算。理论上，利用量子力学现象，量子计算可以极大地改进信息存储和处理方式，算法比传统...
博客
Docsm——将你从频繁的文案修改中解救出来
12-23 470
Docsm——将你从频繁的文案修改中解救出来1 前言今天要和大家分享下最近我们开源的DocsM（Documents Management），对就是文案管理，一个帮助你如何解决静态文案管理的方案，感兴趣的小伙伴可以去github一探究竟。那么接下来就要给大家来个深度剖析了，看看我们到底是怎么做的。2 背景作为FE，我想大家都有一个共同的体验“在代码功能上线后，因为一两句文案或提示信息描述不准...
博客
实现企业数字化转型，你只差一味药引子
12-13 300
实现企业数字化转型，你只差一味药引子数据的权威性和重要性，伴随着时代的发展而来，已经不需要我们再论证了。“去年，我们计划通过数据分析带来3千万美元的收入，到去年底，实时上我们做到了1.05亿美元” – Hilton CDO“如果没有数据，那你顶多算是一个持有不同观点的人而已。我们相信上帝，除此之来，都请用数据说话” – W.Edwards Deming，质量管理之父。“我们会收集所有数据，...
博客
Kubernetes 是什么？
12-11 800
Kubernetes 是什么都9102年了，你再不了解 Kubernetes 就真的 out 了！！！（贩卖焦虑体kubernetes 是什么？Kubernetes 这个词来源于希腊语，有主管、舵手、船长的意思，我们从中能听到一丝管理的意味，从图标中也能看出来。在 kubernetes 的网站上，描述 kubernetes 是:生产级别的容器编排系统从这个定义我们可以提炼出三个关键字...
博客
webpack 透视——提高工程化（实践篇）
12-09 393
wepack 透视——提高工程化（实践篇）webpack 是我们前端工程师必须掌握的一项技能，我们的日常开发已经离不开这个配置。关于这方面的文章已经很多，但还是想把自己的学习过程总结记录下来。上一篇文章介绍了webpack 构建原理，这篇文章将基于这个原理之上，讲述在我们实际工程配置中可以去优化的2 个方向。提升构建速度，也就是减少整个打包构建的时间，优化构建输出，也就是减小我们最终构建...
博客
webpack 透视——提高工程化（原理篇）
12-06 286
wepack 透视——提高工程化（原理篇）webpack 是我们前端工程师必须掌握的一项技能，我们的日常开发已经离不开这个配置。关于这方面的文章已经很多，但还是想把自己的学习过程总结记录下来。一共两篇文章，分为原理篇和实践篇，从 webpack 构建原理开始，然后基于这个原理之上，明确我们实际工程配置中可以去优化的方向。构建原理篇，先帮助大家知道整体打包构建的流程，已经了解的可以略过这篇，...
博客
如何1小时快速上手SQL？（小白篇）
12-05 934
如何1小时快速上手SQL？为了帮大家尽快实现学习Hive SQL、提数，在大数据领域大干一场的愿望，帮你准备好了数据，准备好了SQL样例，照着学，边学边练，主要是解决学一门新手艺起点高入手难的问题。这个自编的课程分成如下的几个部分，欢迎大家选读选练。特别说明准备环境两张示例表SQL示例简单select查询使用where语句按条件筛选使用distinct语句排重使用orde...
博客
前端演进思考
12-04 254
0. 从模型说起原生JS/jQuery 这时候开发者需要手动处理 Bind、Change 和 Update，jQuery 相比原生 JS，简化了操作，屏蔽了浏览器的兼容性。三大框架 这时候开发者只需处理 Bind 和 Change，框架自动完成 Update。框架使用一套高效的 diff 算法最小化更新 DOM，因此除了简化开发者工作，还带来了前端性能的提升。1. 组件思想除此之外，框架...
博客
vue-ssr在项目中的实践
12-04 1733
写在文前由于前端脚手架、打包工具、Node等版本的多样性，本文无法同时兼顾，文中所述皆基于以下技术栈进行。脚手架：vue-cli3打包工具：webpack4，集成在vue-cli3中，通过修改vue.config.js的方式进行配置Node框架：koa2简介​ 服务器端渲染，即采用“同构”的策略，在服务器端对一部分前端代码进行渲染，减少浏览器对页面的渲染量。通常服务器端渲染的优点和...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值