python-memcached client 性能分析

最新推荐文章于 2018-07-14 16:11:05 发布
最新推荐文章于 2018-07-14 16:11:05 发布
阅读量213 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 性能 memcached 问题 文章标签： python memcached
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/SAN_YUN/article/details/84355123
本文通过实际测试表明，在3分钟内产生了366147次get请求，仅有约1.3%的请求响应时间超过了50ms，最长达到2923ms。整体来看，python-memcachedclient的性能表现尚可，但pylibmc的表现更为出色。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

前面python-memcached client 性能问题 提到python-memcached client有性能问题，今天再整理了一下，其实还好。

 

s3一台机器：3分钟时间里产生了366147次get请求 ,超过50ms的只有5000个。最慢是2923ms


从这个量来说，超过50ms所占的比例还是比较小的，所以性能不算差，不过pylibmc真的很猛：

 

 

Memcached使用总结之:使用Python操作memcache
不积跬步，无以至千里；不积小流，无以成江海！
06-08 1万+
Python连接memcached的库有很多，处于简单以及高效的原则，最终选择了pymemcache, 优点 完全实现了memcached text协议对于send/recv操作可以配置timeout支持"noreply"特性，该可行可以先出的提高写的速度使序列化/反序列化更简单可以将网络异常，memecached错误当成是缓存丢失 安装pymemcache pip insta
python线程安全问题_python-memcached的线程安全问题
weixin_39727976的博客
02-10 411
答案是肯定的，前提你在使用Python 2.4+和python-memcached 1.36+为什么我们需要线程安全的memcachedclient，因为我们的实际应用一般是多线程的模型，例如cherrypy、twisted，如果python-memcached不是线程安全的话，引起的问题不仅仅是并发修改共享变量这么简单，是外部socket链接的数据流的混乱python-memcached怎么实现...
python的memcache模块连接速度测试
weixin_34321977的博客
01-16 179
为什么80%的码农都做不了架构师？>>> ...
Python性能提升二 —— 使用memcached
以苦为乐
09-26 826
场景 memcache是一个分布式的、C/S结构的key/value存储系统。使用memcache可以有效地减轻MySQL的访问压力。 本文不介绍memcache的安装以及使用方法，只是简单的性能对比。 性能对比 第一次没有cache，需要到远端MySQL取数据回来，所以访问时间长，之后每次都命中cache，不需要访问MySQL。 附录：完整代码 #!/us
Python项目使用memcached缓存
王二的专栏
05-02 9868
通过缓存数据库查询结果，减少数据库访问次数，可以显著提高动态Web应用的速度和可扩展性。业界常用的有memcached，redis等，今天要讲的就是在python项目中如何使用memcached缓存服务。
python---Memcached
mojolang
01-01 880
Memcached Memcached 是一个高性能的分布式内存对象缓存系统，用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数，从而提高动态、数据库驱动网站的速度。Memcached基于一个存储键/值对的hashmap。其守护进程（daemon ）是用C写的，但是客户端可以用任何语言来编写，并通过memcached协议与守护进程通信。 Memc
python-memcached client 性能问题
SAN_YUN的专栏
11-09 283
线上发现memcached偶发超过100ms的情况，刚开始以为是memcached server连接数过多的问题，后台测试发现本地也存在这个问题，应该是memcached-client实现导致大并发下，性能太差： ab -n1000 -c20 http://127.0.0.1:7299/category/life/   测试pylibmc性能很好，同样并发下面很少有耗时超过1毫秒的： ...
python-memcached python-memcached
04-23
10. **性能优化**：Python-memcached库设计得非常轻量级，它使用最少的网络通信开销，以提高与Memcached服务器之间的通信效率。 Python-memcached库的使用方法相对简单，通常需要导入库，创建客户端，然后通过...
Python库 | tencentcloud-sdk-python-memcached-3.0.335.tar.gz
03-11
memcachedClient = memcached_client.MemcachedClient(secret_id, secret_key, region, clientProfile) # 示例：创建实例 req = models.CreateInstanceRequest.CreateInstanceRequest() # 设置请求参数 # ... resp ...
python-memcached-latest.tar
06-08
Python-Memcached是一个Python接口，用于与Memcached内存缓存系统进行交互。Memcached是一种高性能、分布式内存对象缓存系统，用于减少数据库负载，通过在内存中存储数据来加速网络应用。这个`python-memcached-...
PyPI 官网下载 | tencentcloud-sdk-python-memcached-3.0.315.tar.gz
02-02
client = memcached_client.MemcachedClient(cred, "ap-guangzhou") # 示例：设置键值 request = models.SetItemRequest() request.InstanceId = "your-instance-id" request.Key = "key" request.Value = "value" ...
python3-memcached-master
最新发布
01-22
10. 性能优化：Python3-memcached-master利用多线程，允许并行执行多个操作，以提高性能。此外，它使用了有效的序列化和反序列化策略，如使用pickle模块，来转换Python对象。 总之，Python3-memcached-master是...
gunicorn cpu使用率超过70%的问题
SAN_YUN的专栏
12-30 3978
gunicorn cpu使用率超过70%的问题，待解决。  
log4j 和slf4j的 类冲突解决
SAN_YUN的专栏
07-14 3630
1. 检查 log4j 和slf4j的冲突   public class Log4jTest { public static void main(String[] args) { try { Class.forName("org.slf4j.impl.Log4jLoggerFactory"); } catch (ClassNotFoundException e)...
java.lang.ClassNotFoundException: org.slf4j.impl.StaticLoggerBinder
SAN_YUN的专栏
12-18 2944
工程启动报错   SLF4J: Failed to load class "org.slf4j.impl.StaticLoggerBinder". SLF4J: See http://www.slf4j.org/codes.html#StaticLoggerBinder for further details. Exception in thread "main" java.lang.No...
java.io.StreamCorruptedException: invalid stream header: EFBFBDEF
SAN_YUN的专栏
05-03 2941
Java代码   public class TestDeserialize extends TestCase {       public void testDeserialize() throws IOException, ClassNotFoundException {           ByteArrayOutputStream baos = new ...
HikariPool-1 - Connection is not available, request timed out after
SAN_YUN的专栏
05-07 2880
  在开发中遇到 HikariPool-1 - Connection is not available, request timed out after 3000ms   代码是之前别人写，通过调试发现由于没有conn.close()，很快连接池里的连接用完就会抛出这个异常了 ...
redis expires key不会自动删除的问题
SAN_YUN的专栏
12-18 2262
最近发现线上的session 服务器每隔一段时间内存占用就达到24G，通过redis info查看发现expires key没有被删除：     db1:keys=101177370,expires=101165505   研究了一下才发现，只有在配置文件中设置了最大内存时候才会调用这个函数，而设置这个参数的意义是，你把当做一个内存而不是数据库。   redis如何删除过期数...
java.sql.SQLException: Data source is closed
SAN_YUN的专栏
08-21 2124
最近遇到这个Spring datasouces closed的错误：   [admin@server4 ~]$ tail -300 /duitang/logs/usr/crawler/crawler.log at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:25) ...
Python模块python-binary-memcached：线程安全的二进制memcached客户端
9. 使用方法：通过import引入python-binary-memcached模块后，使用其提供的Client类创建客户端实例，然后可以使用set和get等方法来对memcached中的数据项进行存储和检索操作。 10. 分布式系统：python-binary-...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值