python多线程与GIL的关系--接口测试

2024-03-20 00:48

本文主要是介绍python多线程与GIL的关系--接口测试,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Python标准库为我们提供了threading(多线程)

Python并发编程Futures:Python3.2开始,标准库为我们提供了concurrent.futures模块,concurrent.futures 模块的主要特色是 ThreadPoolExecutor 和ProcessPoolExecutor 类,这两个类实现的接口能分别在不同的线程或进程中执行可调用的对象。这两个类在内部维护着一个工作线程或进程池,以及要执行的任务队列。

Python协程Asyncio:Python 3.4 以后标准库中asyncio 包,这个包使用事件循环驱动的协程实现并发。

1、GIL只支持单线程,而python支持多线程,这两者究竟是什么关系呢?

GIL的存在与Python支持多线程并不矛盾:

GIL是同一时刻,只有一个线程运行

Python的多线程,是指多个线程交替执行,造成一个“伪并行”的结果,具体到某一时刻,仍然只有一个线程在运行,并不是真正的多线程并行。

接口测试的时候,多线程并不影响的,当我们线程1请求接口1的时候这时候等待程序响应,此时线程2开始执行请求接口2的请求,交替进行,通过时间片的切换完成剩余的操作。站在用户角度看到的就是我们所说的多线程

2、 多进程与多线程的应用场景

如果你想对CPU密集型加速,使用多线程是无效的,请使用多进程。CPU密集型,是指会消耗大量的CPU资源的任务,比如计算1到100000000乘积,或者很长的文字编码、解码。

使用多线程无效,是因为Python的多线程互相切换,但是同一时刻只有一个线程运行。所以你使用一个主线程和使用多线程,本质上没有差别。反而由于线程切换带来额外的消耗,还会降低效率。

如果使用多进程,允许多个进程同时执行任务,所以能有效提高运行效率。

至于I/O密集型任务,如果想要加速,优先使用多线程或Asyncio。当然,多进程也可以,但是没有必要。因为I/O密集型的任务大多时间浪费在等待上。因此,在等待I/O时,我们切换线程去执行其他的任务就好了。

如果I/O操作非常多,需要建立连接也比较多,我们一般用Asyncio。因为Asyncio的任务切换更加轻量化,并且启动的任务数也远比多线程启动的线程数要多。

这篇关于python多线程与GIL的关系--接口测试的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/827751

相关文章

Python中局部变量和全局变量举例详解

《Python中局部变量和全局变量举例详解》:本文主要介绍如何通过一个简单的Python代码示例来解释命名空间和作用域的概念,它详细说明了内置名称、全局名称、局部名称以及它们之间的查找顺序,文中通... 目录引入例子拆解源码运行结果如下图代码解析 python3命名空间和作用域命名空间命名空间查找顺序命名空

Python如何将大TXT文件分割成4KB小文件

《Python如何将大TXT文件分割成4KB小文件》处理大文本文件是程序员经常遇到的挑战,特别是当我们需要把一个几百MB甚至几个GB的TXT文件分割成小块时,下面我们来聊聊如何用Python自动完成这... 目录为什么需要分割TXT文件基础版:按行分割进阶版:精确控制文件大小完美解决方案:支持UTF-8编码

基于Python打造一个全能文本处理工具

《基于Python打造一个全能文本处理工具》:本文主要介绍一个基于Python+Tkinter开发的全功能本地化文本处理工具,它不仅具备基础的格式转换功能,更集成了中文特色处理等实用功能,有需要的... 目录1. 概述:当文本处理遇上python图形界面2. 功能全景图:六大核心模块解析3.运行效果4. 相

Python中的魔术方法__new__详解

《Python中的魔术方法__new__详解》:本文主要介绍Python中的魔术方法__new__的使用,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、核心意义与机制1.1 构造过程原理1.2 与 __init__ 对比二、核心功能解析2.1 核心能力2.2

Python虚拟环境终极(含PyCharm的使用教程)

《Python虚拟环境终极(含PyCharm的使用教程)》:本文主要介绍Python虚拟环境终极(含PyCharm的使用教程),具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,... 目录一、为什么需要虚拟环境?二、虚拟环境创建方式对比三、命令行创建虚拟环境(venv)3.1 基础命令3

Python Transformer 库安装配置及使用方法

《PythonTransformer库安装配置及使用方法》HuggingFaceTransformers是自然语言处理(NLP)领域最流行的开源库之一,支持基于Transformer架构的预训练模... 目录python 中的 Transformer 库及使用方法一、库的概述二、安装与配置三、基础使用:Pi

Python 中的 with open文件操作的最佳实践

《Python中的withopen文件操作的最佳实践》在Python中,withopen()提供了一个简洁而安全的方式来处理文件操作,它不仅能确保文件在操作完成后自动关闭,还能处理文件操作中的异... 目录什么是 with open()?为什么使用 with open()?使用 with open() 进行

Python中使用正则表达式精准匹配IP地址的案例

《Python中使用正则表达式精准匹配IP地址的案例》Python的正则表达式(re模块)是完成这个任务的利器,但你知道怎么写才能准确匹配各种合法的IP地址吗,今天我们就来详细探讨这个问题,感兴趣的朋... 目录为什么需要IP正则表达式?IP地址的基本结构基础正则表达式写法精确匹配0-255的数字验证IP地

使用Python实现全能手机虚拟键盘的示例代码

《使用Python实现全能手机虚拟键盘的示例代码》在数字化办公时代,你是否遇到过这样的场景:会议室投影电脑突然键盘失灵、躺在沙发上想远程控制书房电脑、或者需要给长辈远程协助操作?今天我要分享的Pyth... 目录一、项目概述:不止于键盘的远程控制方案1.1 创新价值1.2 技术栈全景二、需求实现步骤一、需求

Python 迭代器和生成器概念及场景分析

《Python迭代器和生成器概念及场景分析》yield是Python中实现惰性计算和协程的核心工具,结合send()、throw()、close()等方法,能够构建高效、灵活的数据流和控制流模型,这... 目录迭代器的介绍自定义迭代器省略的迭代器生产器的介绍yield的普通用法yield的高级用法yidle