Python代码cProfile耗时分析及可视化

2024-06-04 18:18

本文主要是介绍Python代码cProfile耗时分析及可视化,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Python: cProfile 食用方法

import cProfile# 直接把分析结果打印到控制台
# loading为需要监测的函数,arg为其参数
cProfile.run("loading(arg)")
# 把分析结果保存到文件中
cProfile.run("loading(arg)", filename="result.out")
# 增加排序方式
cProfile.run("loading(arg)", filename="result.out", sort="cumulative")

输出类似:

         1767148 function calls (1751776 primitive calls) in 3.579 secondsOrdered by: standard namencalls  tottime  percall  cumtime  percall filename:lineno(function)2824    0.002    0.000    0.014    0.000 <__array_function__ internals>:2(all)7574    0.005    0.000    0.050    0.000 <__array_function__ internals>:2(any)2    0.000    0.000    0.000    0.000 <__array_function__ internals>:2(argsort)2    0.000    0.000    0.000    0.000 <__array_function__ internals>:2(copyto)20    0.000    0.000    0.000    0.000 <__array_function__ internals>:2(count_nonzero)47    0.000    0.000    0.000    0.000 <__array_function__ internals>:2(cumsum)1441    0.001    0.000    0.009    0.000 <__array_function__ internals>:2(prod)47    0.000    0.000    0.001    0.000 <__array_function__ internals>:2(unique)1    0.000    0.000    0.000    0.000 <string>:1(<module>)1908    0.007    0.000    0.007    0.000 BOX_adjacent.py:10(__init__)7750    0.061    0.000    0.164    0.000 BOX_adjacent.py:184(Best_Blok_adj)7750    0.002    0.000    0.002    0.000 BOX_adjacent.py:277(<listcomp>)27042    0.063    0.000    0.426    0.000 BOX_adjacent.py:29(Can_Load_adj)318    0.000    0.000    0.000    0.000 BOX_adjacent.py:291(reset)95394    0.007    0.000    0.007    0.000 BOX_adjacent.py:51(<lambda>)16944    0.001    0.000    0.001    0.000 BOX_adjacent.py:55(<lambda>)34047    0.080    0.000    0.237    0.000 BOX_adjacent.py:81(Possible_Oriatation_adj)76384/61012    0.080    0.000    0.178    0.000 copy.py:128(deepcopy)15372    0.001    0.000    0.001    0.000 copy.py:182(_deepcopy_atomic)...

其中

共有1767148次函数调用,原始调用为1751776次,原始调用说明不包含递归调用。
以standard name进行排序。76384/61012表示发生了递归调用,61012为原始调用次数,76384为递归调用次数
ncalls 函数的被调用次数
tottime 函数总计运行时间,除去函数中调用的函数运行时间
percall 函数运行一次的平均时间,等于tottime/ncalls
cumtime 函数总计运行时间,含调用的函数运行时间
percall 函数运行一次的平均时间,等于cumtime/ncalls
filename:lineno(function) 函数所在的文件名,函数的行号,函数名

可视化工具 graphviz,gprof2dot

pip install graphviz
pip install gprof2dotgprof2dot -f pstats result.out | dot -Tpng -o result.png

结果如下:
请添加图片描述
可以看到check_space_contain被调用了太多次,check代码发现用很多重复的调用,所以简单改一下,只调用一次进行赋值,之后直接拿来用,结果累计调用次数直接降低了30%,节省大量时间,类似可改进的地方还有很多。另外在清楚任务执行与调用关系的情况下,可以做多进程增加运行效率。

这篇关于Python代码cProfile耗时分析及可视化的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1030754

相关文章

C#高效实现在Word文档中自动化创建图表的可视化方案

《C#高效实现在Word文档中自动化创建图表的可视化方案》本文将深入探讨如何利用C#,结合一款功能强大的第三方库,实现在Word文档中自动化创建图表,为你的数据呈现和报告生成提供一套实用且高效的解决方... 目录Word文档图表自动化:为什么选择C#?从零开始:C#实现Word文档图表的基本步骤深度优化:C

Nginx服务器部署详细代码实例

《Nginx服务器部署详细代码实例》Nginx是一个高性能的HTTP和反向代理web服务器,同时也提供了IMAP/POP3/SMTP服务,:本文主要介绍Nginx服务器部署的相关资料,文中通过代码... 目录Nginx 服务器SSL/TLS 配置动态脚本反向代理总结Nginx 服务器Nginx是一个‌高性

Python中Request的安装以及简单的使用方法图文教程

《Python中Request的安装以及简单的使用方法图文教程》python里的request库经常被用于进行网络爬虫,想要学习网络爬虫的同学必须得安装request这个第三方库,:本文主要介绍P... 目录1.Requests 安装cmd 窗口安装为pycharm安装在pycharm设置中为项目安装req

Python容器转换与共有函数举例详解

《Python容器转换与共有函数举例详解》Python容器是Python编程语言中非常基础且重要的概念,它们提供了数据的存储和组织方式,下面:本文主要介绍Python容器转换与共有函数的相关资料,... 目录python容器转换与共有函数详解一、容器类型概览二、容器类型转换1. 基本容器转换2. 高级转换示

使用Python将PDF表格自动提取并写入Word文档表格

《使用Python将PDF表格自动提取并写入Word文档表格》在实际办公与数据处理场景中,PDF文件里的表格往往无法直接复制到Word中,本文将介绍如何使用Python从PDF文件中提取表格数据,并将... 目录引言1. 加载 PDF 文件并准备 Word 文档2. 提取 PDF 表格并创建 Word 表格

使用Python实现局域网远程监控电脑屏幕的方法

《使用Python实现局域网远程监控电脑屏幕的方法》文章介绍了两种使用Python在局域网内实现远程监控电脑屏幕的方法,方法一使用mss和socket,方法二使用PyAutoGUI和Flask,每种方... 目录方法一:使用mss和socket实现屏幕共享服务端(被监控端)客户端(监控端)方法二:使用PyA

Python列表的创建与删除的操作指南

《Python列表的创建与删除的操作指南》列表(list)是Python中最常用、最灵活的内置数据结构之一,它支持动态扩容、混合类型、嵌套结构,几乎无处不在,但你真的会创建和删除列表吗,本文给大家介绍... 目录一、前言二、列表的创建方式1. 字面量语法(最常用)2. 使用list()构造器3. 列表推导式

Python使用Matplotlib和Seaborn绘制常用图表的技巧

《Python使用Matplotlib和Seaborn绘制常用图表的技巧》Python作为数据科学领域的明星语言,拥有强大且丰富的可视化库,其中最著名的莫过于Matplotlib和Seaborn,本篇... 目录1. 引言:数据可视化的力量2. 前置知识与环境准备2.1. 必备知识2.2. 安装所需库2.3

HTML5的input标签的`type`属性值详解和代码示例

《HTML5的input标签的`type`属性值详解和代码示例》HTML5的`input`标签提供了多种`type`属性值,用于创建不同类型的输入控件,满足用户输入的多样化需求,从文本输入、密码输入、... 目录一、引言二、文本类输入类型2.1 text2.2 password2.3 textarea(严格

Python数据验证神器Pydantic库的使用和实践中的避坑指南

《Python数据验证神器Pydantic库的使用和实践中的避坑指南》Pydantic是一个用于数据验证和设置的库,可以显著简化API接口开发,文章通过一个实际案例,展示了Pydantic如何在生产环... 目录1️⃣ 崩溃时刻:当你的API接口又双叒崩了!2️⃣ 神兵天降:3行代码解决验证难题3️⃣ 深度