Python代码cProfile耗时分析及可视化

2024-06-04 18:18

本文主要是介绍Python代码cProfile耗时分析及可视化,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Python: cProfile 食用方法

import cProfile# 直接把分析结果打印到控制台
# loading为需要监测的函数,arg为其参数
cProfile.run("loading(arg)")
# 把分析结果保存到文件中
cProfile.run("loading(arg)", filename="result.out")
# 增加排序方式
cProfile.run("loading(arg)", filename="result.out", sort="cumulative")

输出类似:

         1767148 function calls (1751776 primitive calls) in 3.579 secondsOrdered by: standard namencalls  tottime  percall  cumtime  percall filename:lineno(function)2824    0.002    0.000    0.014    0.000 <__array_function__ internals>:2(all)7574    0.005    0.000    0.050    0.000 <__array_function__ internals>:2(any)2    0.000    0.000    0.000    0.000 <__array_function__ internals>:2(argsort)2    0.000    0.000    0.000    0.000 <__array_function__ internals>:2(copyto)20    0.000    0.000    0.000    0.000 <__array_function__ internals>:2(count_nonzero)47    0.000    0.000    0.000    0.000 <__array_function__ internals>:2(cumsum)1441    0.001    0.000    0.009    0.000 <__array_function__ internals>:2(prod)47    0.000    0.000    0.001    0.000 <__array_function__ internals>:2(unique)1    0.000    0.000    0.000    0.000 <string>:1(<module>)1908    0.007    0.000    0.007    0.000 BOX_adjacent.py:10(__init__)7750    0.061    0.000    0.164    0.000 BOX_adjacent.py:184(Best_Blok_adj)7750    0.002    0.000    0.002    0.000 BOX_adjacent.py:277(<listcomp>)27042    0.063    0.000    0.426    0.000 BOX_adjacent.py:29(Can_Load_adj)318    0.000    0.000    0.000    0.000 BOX_adjacent.py:291(reset)95394    0.007    0.000    0.007    0.000 BOX_adjacent.py:51(<lambda>)16944    0.001    0.000    0.001    0.000 BOX_adjacent.py:55(<lambda>)34047    0.080    0.000    0.237    0.000 BOX_adjacent.py:81(Possible_Oriatation_adj)76384/61012    0.080    0.000    0.178    0.000 copy.py:128(deepcopy)15372    0.001    0.000    0.001    0.000 copy.py:182(_deepcopy_atomic)...

其中

共有1767148次函数调用,原始调用为1751776次,原始调用说明不包含递归调用。
以standard name进行排序。76384/61012表示发生了递归调用,61012为原始调用次数,76384为递归调用次数
ncalls 函数的被调用次数
tottime 函数总计运行时间,除去函数中调用的函数运行时间
percall 函数运行一次的平均时间,等于tottime/ncalls
cumtime 函数总计运行时间,含调用的函数运行时间
percall 函数运行一次的平均时间,等于cumtime/ncalls
filename:lineno(function) 函数所在的文件名,函数的行号,函数名

可视化工具 graphviz,gprof2dot

pip install graphviz
pip install gprof2dotgprof2dot -f pstats result.out | dot -Tpng -o result.png

结果如下:
请添加图片描述
可以看到check_space_contain被调用了太多次,check代码发现用很多重复的调用,所以简单改一下,只调用一次进行赋值,之后直接拿来用,结果累计调用次数直接降低了30%,节省大量时间,类似可改进的地方还有很多。另外在清楚任务执行与调用关系的情况下,可以做多进程增加运行效率。

这篇关于Python代码cProfile耗时分析及可视化的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1030754

相关文章

Java调用DeepSeek API的最佳实践及详细代码示例

《Java调用DeepSeekAPI的最佳实践及详细代码示例》:本文主要介绍如何使用Java调用DeepSeekAPI,包括获取API密钥、添加HTTP客户端依赖、创建HTTP请求、处理响应、... 目录1. 获取API密钥2. 添加HTTP客户端依赖3. 创建HTTP请求4. 处理响应5. 错误处理6.

python使用fastapi实现多语言国际化的操作指南

《python使用fastapi实现多语言国际化的操作指南》本文介绍了使用Python和FastAPI实现多语言国际化的操作指南,包括多语言架构技术栈、翻译管理、前端本地化、语言切换机制以及常见陷阱和... 目录多语言国际化实现指南项目多语言架构技术栈目录结构翻译工作流1. 翻译数据存储2. 翻译生成脚本

Springboot中分析SQL性能的两种方式详解

《Springboot中分析SQL性能的两种方式详解》文章介绍了SQL性能分析的两种方式:MyBatis-Plus性能分析插件和p6spy框架,MyBatis-Plus插件配置简单,适用于开发和测试环... 目录SQL性能分析的两种方式:功能介绍实现方式:实现步骤:SQL性能分析的两种方式:功能介绍记录

如何通过Python实现一个消息队列

《如何通过Python实现一个消息队列》这篇文章主要为大家详细介绍了如何通过Python实现一个简单的消息队列,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录如何通过 python 实现消息队列如何把 http 请求放在队列中执行1. 使用 queue.Queue 和 reque

Python如何实现PDF隐私信息检测

《Python如何实现PDF隐私信息检测》随着越来越多的个人信息以电子形式存储和传输,确保这些信息的安全至关重要,本文将介绍如何使用Python检测PDF文件中的隐私信息,需要的可以参考下... 目录项目背景技术栈代码解析功能说明运行结php果在当今,数据隐私保护变得尤为重要。随着越来越多的个人信息以电子形

使用 sql-research-assistant进行 SQL 数据库研究的实战指南(代码实现演示)

《使用sql-research-assistant进行SQL数据库研究的实战指南(代码实现演示)》本文介绍了sql-research-assistant工具,该工具基于LangChain框架,集... 目录技术背景介绍核心原理解析代码实现演示安装和配置项目集成LangSmith 配置(可选)启动服务应用场景

使用Python快速实现链接转word文档

《使用Python快速实现链接转word文档》这篇文章主要为大家详细介绍了如何使用Python快速实现链接转word文档功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 演示代码展示from newspaper import Articlefrom docx import

Python Jupyter Notebook导包报错问题及解决

《PythonJupyterNotebook导包报错问题及解决》在conda环境中安装包后,JupyterNotebook导入时出现ImportError,可能是由于包版本不对应或版本太高,解决方... 目录问题解决方法重新安装Jupyter NoteBook 更改Kernel总结问题在conda上安装了

Python如何计算两个不同类型列表的相似度

《Python如何计算两个不同类型列表的相似度》在编程中,经常需要比较两个列表的相似度,尤其是当这两个列表包含不同类型的元素时,下面小编就来讲讲如何使用Python计算两个不同类型列表的相似度吧... 目录摘要引言数字类型相似度欧几里得距离曼哈顿距离字符串类型相似度Levenshtein距离Jaccard相

Python安装时常见报错以及解决方案

《Python安装时常见报错以及解决方案》:本文主要介绍在安装Python、配置环境变量、使用pip以及运行Python脚本时常见的错误及其解决方案,文中介绍的非常详细,需要的朋友可以参考下... 目录一、安装 python 时常见报错及解决方案(一)安装包下载失败(二)权限不足二、配置环境变量时常见报错及