0

0

Python 内存分析工具使用教程

冷炫風刃

冷炫風刃

发布时间:2026-03-06 17:07:03

|

638人浏览过

|

来源于php中文网

原创

python内存分析工具用于诊断内存泄漏、循环引用和大对象持有导致的性能下降或oom崩溃,因print和sys.getsizeof无法反映引用关系与全局内存分布;memory_profiler定位行级内存热点,tracemalloc追踪分配源头,objgraph分析引用关系与循环引用,psutil+gc验证回收行为。

python 内存分析工具使用教程

为什么需要 Python 内存分析工具

Python 程序跑着跑着变慢、内存占用飙升、甚至 OOM(Out of Memory)崩溃,往往不是代码逻辑错,而是对象没被及时回收、循环引用堆积、或意外持有了大对象(比如缓存没清理、日志存了整张 DataFrame)。靠 print 或 sys.getsizeof 很难看清全局——它只报单个对象大小,不反映引用关系和生命周期。真正有用的内存分析,得知道“谁创建了它”“谁还在引用它”“它占了多少总空间”。

常用工具及适用场景

memory_profiler:适合快速定位哪一行代码导致内存突增,支持行级监控,对脚本和函数友好。
tracemalloc:Python 3.4+ 内置,轻量、低开销,能追踪内存分配源头(文件+行号),适合线上轻量采样。
objgraph:专攻对象引用关系,可生成引用图、查泄漏对象类型、找循环引用,调试 GC 问题很直观。
psutil + gc:组合使用,实时看进程内存 + 手动触发/检查垃圾回收状态,适合做内存波动归因。

快速上手:用 memory_profiler 找内存热点

安装:pip install memory-profiler
在目标函数前加装饰器:

@profile
def process_data():
    data = [i ** 2 for i in range(10**6)]
    result = sum(data)
    return result

命令行运行:python -m memory_profiler script.py
输出会逐行列出内存增量,一眼看出哪行申请了最多内存。若想监控整个脚本(不用改代码),直接加 -m memory_profiler 参数运行即可。

深入排查:用 tracemalloc 定位分配源头

示例代码:

import tracemalloc
<p>tracemalloc.start()</p><div class="aritcle_card flexRow">
                                                        <div class="artcardd flexRow">
                                                                <a class="aritcle_card_img" href="/xiazai/code/11111" title="网奇.NET网络商城系统"><img
                                                                                src="https://img.php.cn/upload/webcode/000/000/008/176499720377066.jpg" alt="网奇.NET网络商城系统"  onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
                                                                <div class="aritcle_card_info flexColumn">
                                                                        <a href="/xiazai/code/11111" title="网奇.NET网络商城系统">网奇.NET网络商城系统</a>
                                                                        <p>系统优势: 1、 使用全新ASP.Net+c#和三层结构开发. 2、 可生成各类静态页面(html,htm,shtm,shtml和.aspx) 3、 管理后台风格模板自由选择,界面精美 4、 风格模板每月更新多套,还可按需定制  5、 独具的缓存技术加快网页浏览速度 6、 智能销售统计,图表分析 7、 集成国内各大统计系统 8、 多国语言支持,内置简体繁体和英语 9、 UTF-8编码,可使用于全球</p>
                                                                </div>
                                                                <a href="/xiazai/code/11111" title="网奇.NET网络商城系统" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span> </a>
                                                        </div>
                                                </div><p><span>立即学习</span>“<a href="https://pan.quark.cn/s/00968c3c2c15" style="text-decoration: underline !important; color: blue; font-weight: bolder;" rel="nofollow" target="_blank">Python免费学习笔记(深入)</a>”;</p><h1>运行你的可疑代码段</h1><p>data = ["x" * 10000 for _ in range(1000)]</p><h1>获取 top 10 分配位置</h1><p>current, peak = tracemalloc.get_traced_memory()
print(f"当前使用 {current / 1024 / 1024:.1f} MB,峰值 {peak / 1024 / 1024:.1f} MB")</p><p>for filename, lineno, _ in tracemalloc.get_top_traceback().format():
print(f"{filename}:{lineno}")

关键点:
• 必须在代码开始前调用 tracemalloc.start()
get_traced_memory() 返回当前已分配 + 峰值内存
get_top_traceback() 显示内存分配最多的 10 处源码位置,精准到行

查循环引用与对象堆积:objgraph 实战

安装:pip install objgraph
常用操作:

  • objgraph.show_most_common_types(limit=20) —— 查当前最多对象类型(如 list、dict、str 异常多,可能有泄漏)
  • objgraph.show_growth(limit=10) —— 对比两次快照,看哪些类型增长最快
  • objgraph.find_backref_chain(obj, objgraph.is_proper_module, max_depth=10) —— 找某个对象的引用链,确认谁在 hold 它
  • objgraph.show_refs([my_obj], max_depth=3) —— 可视化该对象被哪些对象引用(需 Graphviz 支持)

小技巧:在怀疑泄漏前后各调一次 show_growth,差值大的类型就是重点排查对象。

辅助手段:psutil + gc 验证回收行为

有时你以为对象该被回收了,但它还在。用以下代码验证:

import psutil, gc
import os
<p>process = psutil.Process(os.getpid())
print(f"初始内存: {process.memory_info().rss / 1024 / 1024:.1f} MB")</p><h1>创建并删除大对象</h1><p>big_list = [i for i in range(10**6)]
del big_list</p><p>gc.collect()  # 强制触发垃圾回收
print(f"删完并回收后: {process.memory_info().rss / 1024 / 1024:.1f} MB")
print(f"GC 回收了 {gc.get_count()} 个对象")

注意:
rss 是实际物理内存占用,比 vms 更反映真实压力
gc.get_count() 返回三代 GC 计数,数字突然变小说明刚清过代

热门AI工具

更多
DeepSeek
DeepSeek

幻方量化公司旗下的开源大模型平台

豆包大模型
豆包大模型

字节跳动自主研发的一系列大型语言模型

通义千问
通义千问

阿里巴巴推出的全能AI助手

腾讯元宝
腾讯元宝

腾讯混元平台推出的AI助手

文心一言
文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

讯飞写作
讯飞写作

基于讯飞星火大模型的AI写作工具,可以快速生成新闻稿件、品宣文案、工作总结、心得体会等各种文文稿

即梦AI
即梦AI

一站式AI创作平台,免费AI图片和视频生成。

ChatGPT
ChatGPT

最最强大的AI聊天机器人程序,ChatGPT不单是聊天机器人,还能进行撰写邮件、视频脚本、文案、翻译、代码等任务。

相关专题

更多
pip安装使用方法
pip安装使用方法

安装步骤:1、确保Python已经正确安装在您的计算机上;2、下载“get-pip.py”脚本;3、按下Win + R键,然后输入cmd并按下Enter键来打开命令行窗口;4、在命令行窗口中,使用cd命令切换到“get-pip.py”所在的目录;5、执行安装命令;6、验证安装结果即可。大家可以访问本专题下的文章,了解pip安装使用方法的更多内容。

373

2023.10.09

更新pip版本
更新pip版本

更新pip版本方法有使用pip自身更新、使用操作系统自带的包管理工具、使用python包管理工具、手动安装最新版本。想了解更多相关的内容,请阅读专题下面的文章。

432

2024.12.20

pip设置清华源
pip设置清华源

设置方法:1、打开终端或命令提示符窗口;2、运行“touch ~/.pip/pip.conf”命令创建一个名为pip的配置文件;3、打开pip.conf文件,然后添加“[global];index-url = https://pypi.tuna.tsinghua.edu.cn/simple”内容,这将把pip的镜像源设置为清华大学的镜像源;4、保存并关闭文件即可。

798

2024.12.23

python升级pip
python升级pip

本专题整合了python升级pip相关教程,阅读下面的文章了解更多详细内容。

370

2025.07.23

python中print函数的用法
python中print函数的用法

python中print函数的语法是“print(value1, value2, ..., sep=' ', end=' ', file=sys.stdout, flush=False)”。本专题为大家提供print相关的文章、下载、课程内容,供大家免费下载体验。

192

2023.09.27

python print用法与作用
python print用法与作用

本专题整合了python print的用法、作用、函数功能相关内容,阅读专题下面的文章了解更多详细教程。

17

2026.02.03

堆和栈的区别
堆和栈的区别

堆和栈的区别:1、内存分配方式不同;2、大小不同;3、数据访问方式不同;4、数据的生命周期。本专题为大家提供堆和栈的区别的相关的文章、下载、课程内容,供大家免费下载体验。

434

2023.07.18

堆和栈区别
堆和栈区别

堆(Heap)和栈(Stack)是计算机中两种常见的内存分配机制。它们在内存管理的方式、分配方式以及使用场景上有很大的区别。本文将详细介绍堆和栈的特点、区别以及各自的使用场景。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

600

2023.08.10

JavaScript浏览器渲染机制与前端性能优化实践
JavaScript浏览器渲染机制与前端性能优化实践

本专题围绕 JavaScript 在浏览器中的执行与渲染机制展开,系统讲解 DOM 构建、CSSOM 解析、重排与重绘原理,以及关键渲染路径优化方法。内容涵盖事件循环机制、异步任务调度、资源加载优化、代码拆分与懒加载等性能优化策略。通过真实前端项目案例,帮助开发者理解浏览器底层工作原理,并掌握提升网页加载速度与交互体验的实用技巧。

1

2026.03.06

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 22.5万人学习

Django 教程
Django 教程

共28课时 | 4.8万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.8万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号