利用TCMalloc替换Nginx和Redis默认glibc库的malloc内存分配

最新推荐文章于 2025-09-27 02:59:19 发布
原创 最新推荐文章于 2025-09-27 02:59:19 发布 · 5.3k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍了如何使用TCMalloc替换Nginx和Redis的默认内存分配器，以提高服务器在高并发场景下的性能。详细步骤包括安装libunwind和google-perftools，编译配置Nginx，修改配置文件，创建线程目录，启动Nginx，验证运行状态，以及安装Redis并启用TCMalloc。通过这些操作，可以优化内存管理，降低系统负载。

TCMalloc的全称为Thread-Caching Malloc，是谷歌开发的开源工具google-perftools中的一个成员。与标准的glibc库的Malloc相比，TCMalloc库在内存分配效率和速度上要高很多，这在很大程度上提高了服务器在高并发情况下的性能，从而降低了系统的负载。

1.安装libunwind库
 可以从http://download.savannah.gnu.org/releases/libunwind下载相应的libunwind版本
#wget http://ftp.twaren.net/Unix/NonGNU//libunwind/libunwind-1.1.tar.gz
#tar zxvf libunwind-1.1.tar.gz
#cd libunwind-1.1
#CFLAGS=-fPIC ./configure 
#make CFLAGS=-fPIC 
#make CFLAGS=-fPIC install

 

2.安装google-perftools
#wget http://gperftools.googlecode.com/files/gperftools-2.1

最低0.47元/天 解锁文章
开源内存池tcmalloc,jemalloc对比
thinker
06-02 8342
内存优化总结tcmalloc与jemalloc-转载 AlexNoBug ​ 大连理工大学 计算机科学技术硕士在读 20 人赞同了该文章 概述 需求 系统的物理内存是有限的，而对内存的需求是变化的, 程序的动态性越强，内存管理就越重要，选择合适的内存管理算法会带来明显的性能提升。 比如nginx， 它在每个连接accept后会malloc一块内存，作为整个连接生命周期内的内存池。 当HTTP请求到达的时候，又会malloc一块当前请求阶段的内存池, 因此对malloc的分配速度有一定的..
C++性能优化 —— TCMalloc的原理与使用
2401_86353562的博客
02-10 1244
TCMalloc(Thread-Caching Malloc，线程缓存的malloc）是Google开发的内存分配算法库，最初作为Google性能工具库 perftools 的一部分，提供高效的多线程内存管理实现，用于替代操作系统的内存分配相关的函数（malloc、free，new，new[]等），具有减少内存碎片、适用于多核、更好的并行性支持等特性。
Kioskcached（2） 之 使用tcmalloc 替换 ptmalloc
杨博东的博客
03-10 1365
前言我在 Kioskcached（1）之 Memcached & Redis & Kioskcached 性能测试对比 中找到的一个问题是 malloc，对于一个内存型数据库，很容易理解，当数据量不断增大的过程中，我们势必需要大量的malloc内存，但是如果malloc不给力，性能就会受到影响。glibc中使用ptmalloc作为默认的内存分配器，但是还有一些性能更好的第三方工具，例如 TCMa
在应用程序中替换Linux中Glibc的malloc的四种方法
热门推荐
镇关西拳打鲁智深
12-03 2万+
打算优化系统的内存分配，接管glibc提供的内存管理，但是整个工程的代码量很大，使用malloc、realloc、calloc和free的地方到处都是，如果自己写好的接口需要重命名所有的调用，先不说工作量，部分没有权限查看代码的.a文件就搞不定了。所以需要替换掉系统的malloc，保证原有调用的名称不变。经过尝试，共有四种方法可以替换，各有优缺点吧。方案1 使用环境变量LD_PRELOAD         环境变量LD_PRELOAD指定程序运行时优先加载的动态连接库，这个动态链接库中的符
解决OrcaSlicer内存爆炸：jemalloc替代malloc的终极优化方案
gitblog_00725的博客
09-27 326
你是否在3D打印复杂模型时遭遇过OrcaSlicer突然崩溃？是否注意到软件运行时间越长卡顿越严重？这些问题很可能源于内存碎片——当系统malloc反复分配和释放内存时产生的"内存空洞"，会导致程序在明明有空闲内存的情况下无法分配连续空间。本文将详解如何通过集成jemalloc内存分配器，彻底解决OrcaSlicer的内存管理难题，让大模型切片效率提升30%，崩溃率直降80%。 ## 内存碎片的...
tcmalloc为什么快，如何替换系统malloc
hk78787878的专栏
02-13 1203
使用了thread cache，小块的内存分配都可以从cache中分配。多线程分配内存的情况下，可以减少锁竞争。 tcmalloc官方文档见： https://gperftools.github.io/gperftools/tcmalloc.html tcmalloc可以替换大多数系统、不同编译器环境下的内存分配函数（malloc/free/new/delete),针对不同的编译器和操作系统，...
tcmalloc库两种用法的符号替换原理
bobbypollo的专栏
04-12 2397
利用LD_PRELOAD来加载tcmalloc库在编译时显式链接tcmalloc库试验试验1：不链接tcmalloc试验2：仅显式链接tcmalloc试验3：显式链接libc和tcmalloc，libc在前试验4：显式链接libc和tcmalloc，tcmalloc在前结论利用LD_PRELOAD来加载tcmalloc库那么用户调用malloc肯定是走到tcmalloc中；在编译时显式链接tcma...
使用tcmalloc替换系统的malloc
08-03 956
今天对服务器进行压测，模拟的请求量到4万次/分的时候，进程的CPU占用就已经达到400%了（也就是把四个核都占到100%）。其实模拟的请求数据都是单一的，不会因为BUG的原因导致CPU过高。怀疑是代码里的STL用得过多，加之ttserver和memcached大量的读操作——大量的小内存分配可...
Jemalloc优化MySQL和Nginx
09-02
而在Nginx中，通过在编译时添加`--with-ld-opt="-ljemalloc"`参数，可以启用jemalloc替换默认的内存分配器，以提升Nginx的性能。 对于MySQL和MariaDB，jemalloc的使用方法有两种。一种是在编译时通过`cmake`添加`-...
内存分配延迟真相：为何某些malloc引发任务抖动？毫秒级响应失控根源分析
其根本原因在于，内存分配并非纯粹的用户态操作，而是深度依赖操作系统内核资源（如虚拟内存管理、页表映射）和运行时库（如glibc的ptmalloc2）协同完成的系统行为。 当多线程程序频繁进行动态内存申请时，堆区管理...
linux tcmalloc,内存管理TCMalloc 安装和使用
weixin_30844577的博客
05-26 933
TCMalloc(Thread-Caching Malloc)与标准glibc库的malloc实现一样的功能，但是TCMalloc在效率和速度效率都比标准malloc高很多。TCMalloc是google-perftools工具中的一个(gperftools四个工具分别是：TCMalloc、heap-checker、heap-profiler和cpu-profiler)，这个工具是开源的，以源码形...
在应用程序中替换Linux中Glibc的malloc的四种方法 .
09-07 2741
打算优化系统的内存分配，接管glibc提供的内存管理，但是整个工程的代码量很大，使用malloc、realloc、calloc和free的地方到处都是，如果自己写好的接口需要重命名所有的调用，先不说工作量，部分没有权限查看代码的.a文件就搞不定了。所以需要替换掉系统的malloc
【性能】tcmalloc 使用和原理
我的笔记本
09-16 1万+
安装 安装bazel tcmalloc项目的的管理是用bazel，所以先安装bazel： 在线安装：yum install bazel，如果不行考虑下面的 cd/etc/yum.repos.d/ wget https://copr.fedorainfracloud.org/coprs/vbatts/bazel/repo/epel-7/vbatts-bazel-epel-7.repo yum install bazel 如果还是不行，考虑离线安装。手动从github下载预编译bazel二进制.
c++内存分配器
xiaofeilongyu的博客
04-08 1393
c++内存分配器相关说明
新时代内存分配器：TCMalloc
凌桓丶的博客
05-26 2010
TCMalloc 全称 Thread-Caching Malloc，即线程缓存的 `malloc`，实现了高效的多线程内存管理，用于替代系统的内存分配相关的函数（`malloc`、`free`，`new`，`new[]` 等）。
nginx 内存管理(一)
@@老胡的博客
10-20 749
对于栈内存，函数编译的时候，编译器会移动栈到当前指针位置的代码，实现栈空间的管理。但是对于堆内存，通常需要程序员进行管理，我们常说的内存管理其实就是对堆空间的管理。nginx的内存管理可以分为两个部分，一种是常规的内存池，也就是进程平时所需要的内存管理；这里主要讲的是内存池管理内存。内存池的结构如下：一般来说，内存池的第一个结点会包含以下的数据结构，而从第二个结点开始，max——log部分会被缺省，当做空间进行分配。nginx使用内存池来管理内存，当进程需要内存时，向内存池申请，使用后释放内存池。
Nginx源码分析--内存池
qq_62309585的博客
11-20 1548
NGINX通过ngx_create_pool创建内存池。参数size用来指定从内存池的小块内存区域总共可以获取的内存的最大，同时也是可以申请的单个小块内存的最大size。在函数执行过程中size会转化成16的整数倍。
Nginx内存池（外部资源释放和内存池销毁）
weixin_43973403的博客
08-01 688
nginx内存池外部资源释放和内存池销毁
redis编译时指定内存分配算法为glibc
最新发布
10-24
注意：Redis默认使用jemalloc作为内存分配器，但也可以选择其他分配器，如glibc的malloc（即ptmalloc）或tcmalloc等。 根据用户提供的引用[1]和[3]，我们发现： 引用[1]中提到Redis有定期删除和内存回收策略，但...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值