memcache研究笔记 之 多线程接入的交互

最新推荐文章于 2025-07-19 23:45:32 发布
原创 最新推荐文章于 2025-07-19 23:45:32 发布 · 1.1k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文解析了MC服务端多线程模型的工作原理。主线程负责接收新连接并分配给worker线程处理，worker线程通过事件循环监听事件。主线程与worker线程间通过管道通信，实现任务调度。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

mc主线程启动，worker线程启动
主线程和work线程初始化event_base, 然后event_base_loop
worker线程创建管道，notify_receive_fd  event_add  到所在的event_base上
有新请求接入，主线程处理函数event_handler回调
driver_machin()处理conn_listening状态，dispatch_conn_new分发新的fd
选择一个worker线程，填充CQ队列，通过管道端notify_send_fd告知worker线程
此时处理转移到worker线程，thread_libevent_process进行回调
worker线程取出CQ队列item，创建新的conn(state:conn_new_cmd)，绑定event_handler回调事件
当前conn发生的事件均回调到event_handler


LAMP基础搭建笔记
qq_56984643的博客
12-13 761
​ LAMP 是一个经典的开源软件堆栈，用于构建动态网站和 Web 应用程序。LAMP 代表 Linux、Apache、MySQL 和 PHP。
Java - 程序员面试笔记记录 & 实现 - Part5
Aye
07-16 984
Executor：拦截内部执行器，负责调用 StatementHandler 操作数据库，并把结果通过 ResultSetHandler 进行自动映射，还处理了二级缓存操作。StatementHandler：拦截SQL语法构建的处理。也实现了一级缓存。ParamenterHandler：拦截参数处理。ResultSetHandler：拦截结果集的处理。
[Tips]Memcache支持线程
heiyeluren的blog（黑夜路人的开源世界）
09-11 3490
我读代码读出来的，对应的版本是 memcached-1.2.2 ，大致要支持多线程，在安装的时候必须打开：./configure --enable-threads安装完之后，启动的时候看看帮助信息有没有这条：-t        number of threads to use, default 4如果有，说明已经支持了线程，就可以在启动的时候使用 -t 选项来启动多线程然后启动的时候必
memcache 多线程模型
qq_30192655的博客
12-16 1076
memcache 网络模型采用的是单进程多线程模型，内部使用 libevent 事件库来处理网络请求。 其工作模式是主线程负责 accept 新的客户端连接请求，然后把获取到的新的连接请求经过 Round Robin 方式分配各个 worker 线程，worker 线程负责处理请求。 线程对象类型如下 typedef struct { pthread_t thread_id; /* unique ID of this thread */ struct event_base base; /
memcached-多线程模型
冰枫的随笔
04-10 3830
本来计划研究memcached的多线程模型，后来发现网上博文《Memcached源码分析(线程模型)》写的非常好，因此，也省去了我的大部分时间，这里并不打算自己再重新总结。         不过首先奉上我自己画的一张图，就称为memcached多线程交互的活动图吧，通过此图就基本掌握了main thread与单个worker thread的交互过程，图中序号表示基本的处理流程（图中drive
Memcached源码解析--多线程网络模型
06-11 914
一、网络模型         Memcache网络底层采用的Libevent，其网络模型就是大名鼎鼎的半同步半异步。关于Libevent可以参看我之前写的一篇拙文《Libevent源码解析--事件处理框架》，半同步半异步可以看这篇有名的博文。         在阅读本文前，建议先阅读《Libevent源码解析--事件处理框架》，这样很多概念便于理解，很多组件或术语在这儿不再赘述。 二、多
Memcache支持线程
最实用的Linux博客
10-06 1271
原贴：http://blog.youkuaiyun.com/heiyeshuwu/archive/2007/09/11/1780058.aspx [Tips]Memcache支持线程     我读代码读出来的，对应的版本是 memcached-1.2.2 ，大致要支持多线程，在安装的时候必须打开：./configure --enable-threads安装完之后，启动的时候看看帮助信息有
狂神说笔记之Redis
gouzhengju1454的博客
06-06 2222
nosql Nosql概述： 为什么要用Nosql 单机MySQL的年代！ 在90年代，一个网站的访问量一般不大，用单个数据库完全可以轻松应付！ 在那个时候，更多的都是静态网页，动态交互类型的网站不多。 上述架构下，我们来看看数据存储的瓶颈是什么？ 1. 数据量的总大小，一个机器放不下时 2. 数据的索引（B+ Tree）一个机器的内存放不下时 3. 访问量（读写混合）一个实例不能承受 如果满足了上述 1 or 3个，进化.... DAL：数据库访问层 启动Redi...
架构解密的读书笔记
知行合一 止于至善
09-17 3850
治辉的架构解密的第2版，上周在去北京的路上一边读一边做了一些笔记，涉猎广泛，由浅入深，循序渐进，非常推荐一读。
图解系统-小林coding笔记
最新发布
小小博客
07-19 643
CPU 的硬件参数都会有 GHz 这个参数，比如⼀个 1 GHz 的 CPU，指的是时钟频率是 1 G，代表着 1 秒会产⽣ 1G 次数的脉冲信号，每⼀次脉冲信号⾼低电平的转换就是⼀个周期，称为时钟周期。不同的 CPU 有不同的指令集，也就是对应着不同的汇编语⾔和不同的机器码，接下来选⽤最简单的 MIPS指集，来看看机器码是如何⽣成的，这样也能明⽩⼆进制的机器码的具体含义。对于 CPU 来说，在⼀个时钟周期内， CPU 仅能完成⼀个最基本的动作，时钟频率越⾼，时钟周期就越短，⼯作速度也就越快。
多线程、多进程、协程、缓存（memcache、redis）
weixin_30532973的博客
07-19 336
本节内容： 线程： a:基本的使用: 创建线程： 1：方法 1 import threading 2 3 def f1(x): 4 print(x) 5 6 7 if __name__=='__main__': 8 t=threading.Thread(target=f1,args=(1，)) 9 t.start() ...
memcached 多线程机制
03-30 684
memcache 使用了多线程。多线程内容主要包含线程监听事件的机制，阻塞还是非阻塞；以及主线程和辅助线程的同步机制。 在监听事件机制方面主线程和辅助线程都使用了基于libevent的非阻塞机制。同步机制则使用了管道，即主线程先写入加锁的缓存区，然后向对应管道中写入命令。辅助线程先监听了管道的读，则可以通过读事件获取通知，做出相应处理。主线程仅仅是监听服务端口。值得注意是命令协议格式仅仅为一个字符，可能是为了处理方便。辅助线程负责解析客户端命令，处理命令，最后关闭相应连接。这些工作都是辅助线程完成，..
memcached Master-Worker 模型分析
管子（zero）的杂乱空间
11-14 320
memcached，相信我们搞linux后端的农民工都知道！这里简单的分析一下memcached是如何处理大量并发的连接的。 如题，memcached是个单进程程序，单进程多线程的程序（linuxer可能会会心一笑，这不就是多进程嘛）。memcached底层是用的libevent来管理事件的，下面我们就来看看这个libevent的经典应用是如何运转的。其实一开始memcached是个...
Memcache源码阅读（8）---多线程
Honkee_的专栏
12-25 615
我看的源码版本是1.2.4前面已经将memcached的主要内容讨论完了。这里来说说memcached怎么使用多线程的吧。memcached的线程分为两种，一个主线程，另外的是工作线程。一个主线程负责接收用户的请求，接收到请求后将这个请求递交给多个工作线程的其中一个。每个工作线程都有一个连接队列管理着主线程递交的连接。线程初始化还是从线程的初始化开始。初始化一些锁，然后初始化工作线程，在主线程和工作
Memcached源码分析(线程模型)
lyjtynet的专栏
04-11 973
<br />转自：http://www.iteye.com/topic/344172<br /> <br /> <br />目前网上关于memcached的分析主要是内存管理部分，下面对memcached的线程模型做下简单分析 <br />有不对的地方还请大家指正,对memcahced和libevent不熟悉的请先google之 <br /><br />先看下memcahced启动时线程处理的流程 <br /><br /><br />memcached的多线程主要是通过实例化多个libevent实现的,分别
memcache中的网络IO、多线程、锁
webnoties的专栏
12-09 2016
有效使用网络IO，CPU资源对于大规模的服务器性能有着重要的影响，本文记录memcache对网络IO和CPU的使用方法。线程memcache实现为多线程模型，线程可划分为以下4种：1. 主线程，负责memcache服务器初始化，监听TCP、Unix Domain连接请求；2. 工作线程池，memcache默认4个工作线程，可通过启动参数修改，负责处理TCP、UDP，Unix域套接口链路上的请求；3
memcache的线程模型
xuyunti的博客
04-09 195
MC采用一master多worker的工作模型，由master负责accept客户端请求，然后以RR分发给worker；-t 线程数，用于处理请求，默认为4 -b backlog队列长度，默认1024 线程结构体typedef struct {      pthread_t thread_id;        /* unique ID of this thread */      struct...
memcache线程模型
oujiwei的专栏
04-26 305
单进程（工作进程）多线程半异步半同步框架底层异步使用libevent，每个线程一个event_base 进行异步事件驱动。每个线程一个fd队列，master线程accept一个fd后根据rr算法把fd插入到某个线程的fd队列，然后通过管道向该线程发送一个字符“c”，通知该线程，线程异步监控到管道可读，如果读取到‘c’字符，则从队列中获取fd，并把fd加入到对应的event_base中进行监听。ev...
MEMCACHE启动多进程命令
weixin_33878457的博客
09-28 176
MEMCACHE启动多进程的命令为 默认是11211端口MEMCACHED -d -p 11212 -u nobody -c 1024 -m 64MEMCACHED -d -p 11213 -u nobody -c 1024 -m 64 转载于:https://blog.51cto.com/12034114/1857378...
Windows下php5.3非线程安全的memcache接口库
对于想要在多线程环境下运行 Memcache 扩展的用户，需要寻找线程安全（Thread Safe, 简称 TS）版本的 DLL。 标签中包括了几个关键词：memcache、vc9、nts 和 windows。每个词都对应了该 DLL 的关键特性或兼容环境。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值