python程序越跑越慢与内存泄漏

博客内容描述了作者在运行Python程序时遇到的问题,即随着运行轮数增加,程序执行速度逐渐减慢,疑似存在内存泄漏。通过使用`memory_profiler`和`psutil`工具进行内存监测,定位到问题出现在神经网络的创建和`sess.run`在for循环中,导致每次循环都重新创建计算图,从而占用更多内存。解决方案是将神经网络的创建与训练部分单独封装为一个函数,只初始化一次计算图,显著减少了内存占用并提高了运行速度。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

问题:运行python程序的时候,在100轮以后时间从初始的3S一次,慢慢变为1分钟一次,越来越慢。

处理方法:查询资料得,这种问题的出现基本是由于程序内存泄漏。所以需要监测内存占用情况。

监测内存需要: memory_profiler 与   psutil 

1. pip install memory_profiler         pip install psutil 

2. 在需要监测的程序前放入装饰器, 更多用法见memory_profiler的文档: https://pypi.org/project/memory-profiler/

例:

from memory_profiler import profile

@profile
def my_func():
    a = [1] * (10 ** 6)
    b = [2] * (2 * 10 ** 7)
    del b
    return a

3. 运行  python -m memory_profiler test.py

就会出现如下结果:

Line #    Mem usage    Increment   Line Contents
================================================
  &

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值