ceph async_messenger 如何工作

最新推荐文章于 2023-09-15 09:59:52 发布
原创 最新推荐文章于 2023-09-15 09:59:52 发布 · 144 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#ceph

由于博客内容为空，暂无法提供包含关键信息的摘要。

在这里插入图片描述

Ceph网络模块(3)——AsyncMessenger代码流程分析
Hequan的专栏
01-08 5681
Ceph网络模块(3)——AsyncMessenger代码流程分析
【ceph】AsyncMessenger 通信模块基础A1--编辑中
我的笔记本
12-14 3591
ceph网络通信三种实现方式 代码在 src/msg ceph的网络通信的源码在src/msg下，有Ceph Messager的三个实现：simple，async，xio。 simple模式:2021：基本不用了，不建议看了） simple模式相对比较简单，一个链接的每一端都有两个线程，分别负责读和写，当集群规模很大的时候，会有大量线程，占用大量资源，限制了网络性能。（SimpleMessenger是网络层最早的实现，当时的网络编程模型还是线程当道，因此simple采用的就是这种简单粗暴的线
【ceph】AsyncMessenger模块源码分析01 资源创建
我的笔记本
12-28 814
ceph早些版本默认的网络框架是SimpleMessenger，但是SimpleMessenger是多线程模型，对于较大的集群，会产生很多线程，对主机的要求也比较高。 当前的版本（mimic，v13）默认的messenger框架是AsyncMessenger，AsyncMessenger可以选择多路IO复用的epoll模型来处理连接和消息，这大大的减少了由于连接数过多带来的主机资源消耗。 下面以OSD的ms_public来介绍AsyncMessenger网络模块。 messenger = Mess
ceph——AsyncMessenger类图
w007d的专栏
03-02 466
以上类图简单的画出了关键类之间的关系，可能存在错误的地方。 AsyncMessenger构造打字过程 1：生成DispatchQueue对象 2：生成AsyncMessenger：：stack，该变量为PosixNetworkStack类型指针 在其父类NetworkStack构造时，会生成vector<Worker*>成员，Worker*是PosixWorer的父类指针 Worker...
【ceph】AsyncMessenger模块源码分析02 会话建立过程
我的笔记本
12-11 1355
目录 Ceph Async Messengerhttp://blog.wjin.org/posts/ceph-async-messenger.html Overview Server Initialization Bind and Listen Deal with Event Add Listen Fd Accept Connection Add Accept Fd Communication Client Summary 源文: Ceph Async Messengerhttp
Ceph Async RDMA网络通信性能优化
国产CAx(CAD/CAE/CAM)软件研发
07-13 3849
网络通信的优化汇总 济南友泉软件有限公司 目录 一、 现有代码分析 1.1. Reactor模型 1.1.1. Reactor模型的优点 1.1.2. Reactor模型的优点. 1.2. 有限状态机模型 1.3. Async模块 1.2.1. Async工作原理 1.2.2. Async主要组件 1.4. RDMA 1.3.1. RDMA三种不同的硬件实现 1.3.2....
【Ceph】Async RDMA网络通信性能优化
小鱼菜鸟的博客
12-29 1147
目录 Infiniband RoCE iWARP 附录(Ⅰ)：连接过程状态迁移图 参阅资料 RDMA 数据传输 3. RDMA Send/Receive 3.1 第一步 3.2 第二步 3.3 第三步 3.4 第四步 4. 总结 现有代码分析 网络通信模块的实现在源代码src/msg的目录下，该目录主要包括Messenger...
【ceph 】ceph messenger的Dispatcher模块分析
我的笔记本
12-25 1701
Dipatcher类是消息分发的接口，OSD、MON、等类都继承该类，并实现了Dipatcher的消息分发接口 class OSD : public Dispatcher,public md_config_obs_t { /** OSD **/ } class Monitor : public Dispatcher,public md_config_obs_t { public: // me string name; } 在OSD::init()函数中把不同类型的D.
【Ceph 】Async 通信会话建立过程--OSD--实际跟踪笔记
小鱼菜鸟的博客
07-22 493
目录 一、前置知识 1、ceph Async 模型 2、Async Messenger机制图 3、Async Messenger分层架构 二、代码跟踪 1、Server 1)Initialization (create ) 2)Bind and Listen 3)Deal with Event 4)Add Listen Fd 5)...
ceph网络通信Message数据结构
大隐隐于野
09-15 457
ms_fast_dispatch的调用是由Pipe的接收线程直接处理的，因此性能比前者要好。5.否则调用函数in_q->enqueue(m, m->get_priority(), conn_id) ， 本函数把接收到的消息加入到DispatchQueue的mqueue 队列里， 由DispatchQueue的线程调用ms_dispatch处理。需要注意的是，这里的消息发送都是异步发送，请求的ack应对消息回来后在Dispatcher的 ms_dispatch或者ms_fast_dispatch里处理。
【ceph】ceph通信 message的数据结构
小鱼菜鸟的博客
11-14 720
网络通信的接口 在src/msg 的目录里，定义了网络模块的接口。 在源代码src/msg 里实现了ceph 的网络通信模块。在msg目录下，定义了网络通信的抽象接口。 msg/Message.cc msg/Message.h 定义了message msg/Connection.h 关于connection 的接口定义 msg/Dispat...
【Ceph】Ceph源码分析之Async模块
小鱼菜鸟的博客
01-15 251
原文：https://blog.youkuaiyun.com/hawkerou/article/details/65449957 1、异步通信核心模块EventCenter+Epoll 概述 EventCenter是Async异步消息通信的核心模块，通过事件／回调模型向上提供异步消息通信，每个Async下的worker线程负责处理一个EventCenter的事...
Ceph网络模块使用案例：OSD心跳检测机制
ja55825266的博客
07-16 4558
ceph是一个分布式的文件系统。对于一个分布式系统，需要一个稳定的底层网络通信模块（消息模块），用于组件之间的互联互通。   ceph的组件主要包括，OSD,monitor，mgr，osdclient，client等，这些模块内部的通信，以及模块间的通信都使用了，后面我们直接把这些组件称为网络模块的使用者。使用者在使用网络模块的时候，主要涉及到2个角色，一个是messenger，一个是disp...
【ceph】Messenger的基准测试工具ceph_perf_msgr_server/ceph_perf_msgr_client|性能测试
我的笔记本
03-02 989
CEPH_PERF_MSGR ceph_perf_msgr仅用于做Messenger模块的基准测试，可以帮助您找到Messenger模块中的瓶颈或耗时。就像“ iperf”一样，我们需要首先启动服务器端程序： server ＃./ceph_perf_msgr_server 172.16.30.181:10001 0 第一个参数是ip：port对，绑定IP：绑定端口号。 第二个参数告诉您调度消息时的“思考时间”。在Giant之后，CEPH_OSD_OP消息（即实际的客户端读/写io请求）将快速分.
Ceph网络模块介绍
scaleqiao的专栏
04-20 4067
1 Socket简介 Ceph的网络通信是基于Socket技术实现的，所以要想搞清楚网络部分，必须先清楚socket的工作机制，这里介绍一些基本的内容，要深入理解socket请参阅《linux网络编程》一书和《tcp/ip详解》。 socket起源于Unix，而Unix/Linux基本哲学之一就是“一切皆文件”，都可以用“打开open -> 读写write/read -> 关闭clos
Ceph网络模块(2) - AsyncMessenger组织结构
Hequan的专栏
01-08 3892
本文主要介绍AsyncMessenger的代码框架结构以及基本数据结构
ceph AsyncMessenger模块源码分析（上）
Jason_Linux
01-24 2099
1
Ceph 网络模块（4）——SimpleMessenger数据结构及代码流程分析
Hequan的专栏
11-13 3398
Ceph 的消息处理主要关联到以下几个类:架构上采用 Publish/subscribe(发布/订阅) 的设计模式.模块说明:Messenger 该类作为消息的发布者, 各个 Dispatcher 子类作为消息的订阅者, Messenger 收到消息之后，通过 Pipe 读取消息，然后转给 Dispatcher 处理SimpleMessenger Messenger 接口的实现Dispatche
Ceph介绍及原理架构分享
weixin_44389885的博客
06-29 6838
1. Ceph架构简介及使用场景介绍 1.1 Ceph简介 Ceph是一个统一的分布式存储系统，设计初衷是提供较好的性能、可靠性和可扩展性。 Ceph项目最早起源于Sage就读博士期间的工作（最早的成果于2004年发表），并随后贡献给开源社区。在经过了数年的发展之后，目前已得到众多云计算厂商的支持并被广泛应用。RedHat及OpenStack都可与Ceph...
ceph ceph_argparse
09-20
ceph_argparse是一个用于解析Ceph进程启动时设置的参数的函数。它被用来解析命令行参数并将其转换为CephContext对象中的配置选项。 在引用中，示例命令"/usr/bin/ceph-mon -f --cluster ceph --id node1 --setuser ceph --setgroup ceph"表示启动一个ceph-mon进程，并给它传递了一些命令行参数。 在引用和引用中，CephContext对象被创建，并将参数传递给它。这个对象用于管理Ceph进程的上下文环境和配置信息。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值