内存泄露排查笔记

关注

VIP免费原创 2025-04-17 16:41:30 903 阅读 AI 写同款· GEO 优化 ›

日常知识点之内存泄露定位手段（c语言hook malloc相关方式）日常闲听公开课，又是自己不会的一个知识点，做笔记整理：如何确定有内存泄露问题，如何定位到内存泄露位置，如何写一个内存泄漏检测工具？ 1：概述 内存泄露本质：其实就是申请调用malloc/new，但是释放调用free/delete有遗漏，或者重复释放的问题。 内存泄露会导致的现象：作为一个服务器，长时间运行，内存泄露会导致进程虚拟内存被占用完，导致进程崩溃吧。（堆上分配的内存）如何规避或者发现内存泄露呢？ ===》1：如何检测有内存泄露？（除了内存监控工具htop，耗时，效果不明显） ===》2：如何定位阅读详情

排查内存泄露过程

示例代码

主函数 main.py

from fastapi import FastAPI
from .memory_debug import debugger

app = FastAPI(title="Memory Leak Demo")

_cache = []


def process_data(data):
    """模拟内存泄漏：将处理后的数据存入全局列表"""
    processed = {
     
     
        'id': data['id'],
        'value': data['value'],  # 故意放大数据
        'timestamp': data['timestamp']
    }
    _cache.append(processed)  # 内存泄漏点（持续累积）

    return processed


@app.get("/process-data")
async def leaky_endpoint(size: int = 1000):
    """生成测试数据集"""
    dataset = [{
     
     
        'id': i,
        'value': str(i) * 10,  # 故意创建较大字符串，导致内存膨胀
        'timestamp': i
    } for i in range(size)]

    # 在处理数据前拍摄内存快照，标记为 "before_processing"
    debugger.take_snapshot("before_processing")

    results = []
    for data in dataset:
        results.append(process_data(data))

    # 处理完成后再次拍摄内存快照，标记为 "after_processing"
    debugger.take_snapshot("after_processing")

    print("length _cache : ", len(_cache))
    return {
     
     
        "processed": len(results),
        "message": f"Processed {
       
       size} items (with memory leak)"
    }


@app.get("/debug/memory")
async def debug_memory(compare: str = None, limit: int = 5):
    """内存调试端点"""
    if compare:
        snap1, snap2 = compare.split(",")
        return {
     
     
            "comparison": debugger.compare_snapshots(snap1, snap2, limit)
        }
    else:
        return {
     
     
            "current": debugger.get_memory_stats()
        }


@app.get("/clear-cache")
async def clear_cache():
    """清空泄漏缓存"""
    _cache.clear()
    print("length _cache : ", len(_cache))

    return {
     
     "message": "Cache cleared"}