数据结构与算法(Python版)学习笔记——算法衡量指标、大O表示法、列表和字典性能对比

本文主要是介绍数据结构与算法(Python版)学习笔记——算法衡量指标、大O表示法、列表和字典性能对比,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

中国大学MOOC《数据结构与算法(Python版)》(北京大学陈斌教授) 学习笔记

文章目录

    • 什么是好算法
    • 算法时间的度量指标
    • 数量级函数(大O)
    • 不同算法,大O不同(举例)
    • Python的两种数据类型(List和Dict)的性能对比
      • 对于List列表
      • 对于Dict字典

什么是好算法

我们主要从计算资源消耗的角度来评判和比较算法(即算法分析)。
更高效利用计算资源,或者更少占用计算资源的算法,就是好算法。
计算资源包括运行过程中所需的存储空间运行时间
故运行时间是一个衡量算法好坏的重要指标,

运行时间检测方法:time模块、timeit模块。
Jupyter notebook中,可在代码块开头加 %timeit

%timeit
lst = []

由于绝对运行时间常常受编程语言、运行环境等影响,需要有更好的度量指标来衡量运行时间。

算法时间的度量指标

对于编程语言来说,一共有三种形式的语句:

  1. 定义语句:如定义一个变量。不占计算资源。
  2. 三种控制流语句(顺序、分支、循环):组织作用,不实施处理。
  3. 赋值语句:包含(表达式)计算和(变量)存储

所以赋值语句的数量可成为一个算法的合适的度量指标。

a = 100
a += 1

数量级函数(大O)

引入T(n),表示赋值语句数量函数。

a = 100
for i in range(100):a += 1

上面代码赋值了n+1次,故T(n)=n+1。但是随着n的增大,这个1显得无足轻重,n为该问题的主导部分,称为问题规模

数量级函数描述了该主导部分,称作“大O”表示法。

记作: O ( f ( n ) ) O(f(n)) O(f(n))
其中 f ( n ) f(n) f(n)为主导部分。在上例中,即为 O ( n ) O(n) O(n)

举个栗子: T ( n ) = 5 n 2 + 27 n + 1005 T(n)=5n^2+27n+1005 T(n)=5n2+27n+1005,这里n非常大时平方项占主导,故该例为: O ( n 2 ) O(n^2) O(n2)

常见数量级函数(按性能大小排列):

f(n)名称
1常数
log(n)对数
n线性
n l o g ( n ) nlog(n) nlog(n)对数线性
n 2 n^2 n2平方
n 3 n^3 n3立方
2 n 2^n 2n指数

不同算法,大O不同(举例)

举例:变位词判断,如判断 “python” 和 “typhon” 是否为变位词。
以下四种算法:

  1. 逐字检查:二重循环, O ( n 2 ) O(n^2) O(n2)
  2. 排序比较:各自按字符编码排序,看是否一样, O ( n l o g ( n ) ) O(nlog(n)) O(nlog(n))
  3. 暴力法:穷尽所有可能组合,再判断两个词是否在组合集内, O ( n ! ) O(n!) O(n!),最不可取
  4. 计数比较:统计两个词中每个字母出现的次数,看是否相同, O ( n ) O(n) O(n)

在方法4中,总操作次数T(n)=2n+26,其数量级为O(n)。
算法依赖于两个长度为26的计数器列表,来保存字符计数,相比前3个算法需要更多的存储空间。
因此这个算法以牺牲存储空间来换取运行时间,达到了运行速度的提升。
我们常需在时间空间之间做取舍

Python的两种数据类型(List和Dict)的性能对比

Python的常用数据类型List列表Dict字典在使用性能上是存在差异的,体现在其各自的操作(函数)的数量级函数上。
两种数据类型的常用操作:

类型listdict
索引自然数i不可变类型值key
添加append、extend、insertb[k]=v
删除pop、remove*pop
更新a[i]=vb[k]=v
正查a[i]、a[i:j]b[k]、copy
反查index(v)、count(v)
其它reverse、sorthas_key、update

对于List列表

按索引取值和赋值(v = a[i], a[i] = v): O ( 1 ) O(1) O(1)
列表增长 append(v): O ( 1 ) O(1) O(1)
列表增长 lst = lst + [v]: O ( n + k ) O(n+k) O(n+k)
k为增加列表的长度,两种列表增长的方式性能差异很大。
slice切片 lst[1:10]: O ( k ) O(k) O(k)
pop() : O ( 1 ) O(1) O(1)
pop(i) : O ( n ) O(n) O(n)
两种删除方式性能有差异。
reverse() : O ( n ) O(n) O(n)
sort() : O ( n l o g ( n ) ) O(nlog(n)) O(nlog(n))
包含判断in v in lst O ( n ) O(n) O(n)

对于Dict字典

取值get和赋值set : O ( 1 ) O(1) O(1)
包含判断 contains(in) : O ( 1 ) O(1) O(1)
del dct[key] : O ( 1 ) O(1) O(1)
这里字典的包含判断性能 O ( 1 ) O(1) O(1)优于列表 O ( n ) O(n) O(n)

更多Python数据类型算法复杂度参考官网:
https://wiki.python.org/moin/TimeComplexity

(fin)

这篇关于数据结构与算法(Python版)学习笔记——算法衡量指标、大O表示法、列表和字典性能对比的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/798617

相关文章

Python的Darts库实现时间序列预测

《Python的Darts库实现时间序列预测》Darts一个集统计、机器学习与深度学习模型于一体的Python时间序列预测库,本文主要介绍了Python的Darts库实现时间序列预测,感兴趣的可以了解... 目录目录一、什么是 Darts?二、安装与基本配置安装 Darts导入基础模块三、时间序列数据结构与

Python正则表达式匹配和替换的操作指南

《Python正则表达式匹配和替换的操作指南》正则表达式是处理文本的强大工具,Python通过re模块提供了完整的正则表达式功能,本文将通过代码示例详细介绍Python中的正则匹配和替换操作,需要的朋... 目录基础语法导入re模块基本元字符常用匹配方法1. re.match() - 从字符串开头匹配2.

Python使用FastAPI实现大文件分片上传与断点续传功能

《Python使用FastAPI实现大文件分片上传与断点续传功能》大文件直传常遇到超时、网络抖动失败、失败后只能重传的问题,分片上传+断点续传可以把大文件拆成若干小块逐个上传,并在中断后从已完成分片继... 目录一、接口设计二、服务端实现(FastAPI)2.1 运行环境2.2 目录结构建议2.3 serv

通过Docker容器部署Python环境的全流程

《通过Docker容器部署Python环境的全流程》在现代化开发流程中,Docker因其轻量化、环境隔离和跨平台一致性的特性,已成为部署Python应用的标准工具,本文将详细演示如何通过Docker容... 目录引言一、docker与python的协同优势二、核心步骤详解三、进阶配置技巧四、生产环境最佳实践

Python一次性将指定版本所有包上传PyPI镜像解决方案

《Python一次性将指定版本所有包上传PyPI镜像解决方案》本文主要介绍了一个安全、完整、可离线部署的解决方案,用于一次性准备指定Python版本的所有包,然后导出到内网环境,感兴趣的小伙伴可以跟随... 目录为什么需要这个方案完整解决方案1. 项目目录结构2. 创建智能下载脚本3. 创建包清单生成脚本4

Python实现Excel批量样式修改器(附完整代码)

《Python实现Excel批量样式修改器(附完整代码)》这篇文章主要为大家详细介绍了如何使用Python实现一个Excel批量样式修改器,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一... 目录前言功能特性核心功能界面特性系统要求安装说明使用指南基本操作流程高级功能技术实现核心技术栈关键函

python获取指定名字的程序的文件路径的两种方法

《python获取指定名字的程序的文件路径的两种方法》本文主要介绍了python获取指定名字的程序的文件路径的两种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要... 最近在做项目,需要用到给定一个程序名字就可以自动获取到这个程序在Windows系统下的绝对路径,以下

使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解

《使用Python批量将.ncm格式的音频文件转换为.mp3格式的实战详解》本文详细介绍了如何使用Python通过ncmdump工具批量将.ncm音频转换为.mp3的步骤,包括安装、配置ffmpeg环... 目录1. 前言2. 安装 ncmdump3. 实现 .ncm 转 .mp34. 执行过程5. 执行结

Python实现批量CSV转Excel的高性能处理方案

《Python实现批量CSV转Excel的高性能处理方案》在日常办公中,我们经常需要将CSV格式的数据转换为Excel文件,本文将介绍一个基于Python的高性能解决方案,感兴趣的小伙伴可以跟随小编一... 目录一、场景需求二、技术方案三、核心代码四、批量处理方案五、性能优化六、使用示例完整代码七、小结一、

Python中 try / except / else / finally 异常处理方法详解

《Python中try/except/else/finally异常处理方法详解》:本文主要介绍Python中try/except/else/finally异常处理方法的相关资料,涵... 目录1. 基本结构2. 各部分的作用tryexceptelsefinally3. 执行流程总结4. 常见用法(1)多个e