使用memory_profiler监测python代码运行时内存消耗方法

脚本专栏 2024/11/11 佚名

3 1 2

前几天一直在寻找能够输出python函数运行时最大内存消耗的方式，看了一堆的博客和知乎，也尝试了很多方法，最后选择使用memory_profiler中的mprof功能来进行测量的，它的原理是在代码运行过程中每0.1S统计一次内存，并生成统计图。

具体的使用方式如下：

首先安装memory_profiler和psutil（psutil主要用于提高memory_profile的性能，建议安装）（可使用pip直接安装）

pip install memory_profiler 
pip install psutil

具体运行方式为如下：（在待检测代码所在目录中打开命令行运行如下代码）

mprof run test.py

结果会生成一个.dat文件，如”mprofile_20160716170529.dat”，里面记录了内存随时间的变化

mprof plot

使用该命令以图片的形式展示出来

如果在运行的时候出现如下的gbk解码错误，解决方案是首先进入 memory_profiler.py文件中，找到第1131行，

把with open(filename) as f: 更改成 with open(filename, encoding='utf-8') as f：！！！

UnicodeDecodeError: ‘gbk' codec can't decode byte 0xad in position 337: illegal multibyte sequence

值得注意的是，尽管网上大部分都说在待检测的函数之前加上@profile修饰器，但是不知道为何我在anaconda python3.6的环境里始终加不上这个修饰器，强行加上就报错，没加上也没问题。

memory,profiler,python,内存消耗

华山资源网 Design By www.eoogi.com

广告合作：本站广告合作请联系QQ：858582 申请时备注：广告合作（否则不回）
免责声明：本站资源来自互联网收集,仅供用于学习和交流,请遵循相关法律法规,本站一切资源不代表本站立场,如有侵权、后门、不妥请联系本站删除！

华山资源网 Design By www.eoogi.com

评论“使用memory_profiler监测python代码运行时内存消耗方法”

暂无评论...

2024年11月11日