concurrent.futures用法

2023-11-10 05:18
文章标签 用法 futures concurrent

本文主要是介绍concurrent.futures用法,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

submit 异步提交
map(func, *iterables, timeout=None, chunksize=1) 
类似  map(func, *iterables)除了以下:
迭代器是立即收集的而不是延迟收集的
func是异步执行的和对func的多个调用可以并发执行
shutdown(wait=True) 
相当于进程池的pool.close()+pool.join()操作
wait=True,等待池内所有任务执行完毕回收完资源后才继续
wait=False,立即返回,并不会等待池内的任务执行完毕
但不管wait参数为何值,整个程序都会等到所有任务执行完毕
submit和map必须在shutdown之前
result(timeout=None) 取得结果,如果在for中引用将会形成阻塞
add_done_callback(fn) 回调函数,异步执行
submit 使用和验证异步运行:
import time
import os
import threading
from concurrent.futures import ThreadPoolExecutor,ProcessPoolExecutor
def func():
time.sleep(2)
print('11',threading.current_thread().getName())
if __name__ == '__main__':
tpool = ThreadPoolExecutor(max_workers=2) #max_workers指定多少个线程
# tpool = ProcessPoolExecutor(max_workers=5) #进程池的使用只需要将上面的ThreadPoolExecutor改为ProcessPoolExecutor就行了,其他都不用改
start = time.time()
for i in range(2):
tpool.submit(func)
tpool.shutdown() #加了shutdown等close()加join(),锁pool并等子线程结束才主线程才结束
end = time.time() - start
print(end)
结果:
11 ThreadPoolExecutor-0_0
11 ThreadPoolExecutor-0_1
2.001002073287964
func()设定了休眠两秒,这时设置进程池,并用submit()功能运行,发现运行两次func()的时间是两秒,所以得出submit是异步运行结果
map的使用
from concurrent.futures import ThreadPoolExecutor,ProcessPoolExecutor
import threading
import os,time,random
def task(n):
print('%s is runing' %threading.get_ident())
time.sleep(random.randint(1,3))
return n**2
if __name__ == '__main__':
executor=ThreadPoolExecutor(max_workers=3)
# for i in range(11):
#     future=executor.submit(task,i)
s = executor.map(task,range(1,5)) #map取代了for+submit,将1,2,3,4的值传入task进行异步执行
print([i for i in s])
结果:
123145491988480 is runing
123145497243648 is runing
123145502498816 is runing
123145497243648 is runing
[1, 4, 9, 16]
回调函数(add_done_callback):
import time
import os
import threading
from concurrent.futures import ThreadPoolExecutor,ProcessPoolExecutor
def func(n):
time.sleep(2)
return n*n
def call_back(m):
print('结果为:%s'%(m.result()))
tpool = ThreadPoolExecutor(max_workers=5)
t_lst = []
for i in range(5):
t = tpool.submit(func,i).add_done_callback(call_back) #将tpool.submit(func,i)的返回值给函数call_back异步执行
结果:
结果为:0
结果为:9
结果为:4
结果为:1
结果为:16
for中result引发阻塞
import time
from concurrent.futures import ThreadPoolExecutor
def func(n):
time.sleep(2)
return n*n
tpool = ThreadPoolExecutor(max_workers=5)
t_lst = []
start = time.time()
for i in range(5):
t = tpool.submit(func,i)
print(t.result())
end = time.time() - start
print("时间:%f"%end)
结果:
0
1
4
9
16
时间:10.023604

转载于:https://www.cnblogs.com/BALCKLIGHTNING/p/10067598.html

这篇关于concurrent.futures用法的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/380559

相关文章

Python中logging模块用法示例总结

《Python中logging模块用法示例总结》在Python中logging模块是一个强大的日志记录工具,它允许用户将程序运行期间产生的日志信息输出到控制台或者写入到文件中,:本文主要介绍Pyt... 目录前言一. 基本使用1. 五种日志等级2.  设置报告等级3. 自定义格式4. C语言风格的格式化方法

SpringBoot 获取请求参数的常用注解及用法

《SpringBoot获取请求参数的常用注解及用法》SpringBoot通过@RequestParam、@PathVariable等注解支持从HTTP请求中获取参数,涵盖查询、路径、请求体、头、C... 目录SpringBoot 提供了多种注解来方便地从 HTTP 请求中获取参数以下是主要的注解及其用法:1

Java中HashMap的用法详细介绍

《Java中HashMap的用法详细介绍》JavaHashMap是一种高效的数据结构,用于存储键值对,它是基于哈希表实现的,提供快速的插入、删除和查找操作,:本文主要介绍Java中HashMap... 目录一.HashMap1.基本概念2.底层数据结构:3.HashCode和equals方法为什么重写Has

Android协程高级用法大全

《Android协程高级用法大全》这篇文章给大家介绍Android协程高级用法大全,本文结合实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友跟随小编一起学习吧... 目录1️⃣ 协程作用域(CoroutineScope)与生命周期绑定Activity/Fragment 中手

Python异步编程之await与asyncio基本用法详解

《Python异步编程之await与asyncio基本用法详解》在Python中,await和asyncio是异步编程的核心工具,用于高效处理I/O密集型任务(如网络请求、文件读写、数据库操作等),接... 目录一、核心概念二、使用场景三、基本用法1. 定义协程2. 运行协程3. 并发执行多个任务四、关键

Python中yield的用法和实际应用示例

《Python中yield的用法和实际应用示例》在Python中,yield关键字主要用于生成器函数(generatorfunctions)中,其目的是使函数能够像迭代器一样工作,即可以被遍历,但不会... 目录python中yield的用法详解一、引言二、yield的基本用法1、yield与生成器2、yi

深度解析Python yfinance的核心功能和高级用法

《深度解析Pythonyfinance的核心功能和高级用法》yfinance是一个功能强大且易于使用的Python库,用于从YahooFinance获取金融数据,本教程将深入探讨yfinance的核... 目录yfinance 深度解析教程 (python)1. 简介与安装1.1 什么是 yfinance?

Python库 Django 的简介、安装、用法入门教程

《Python库Django的简介、安装、用法入门教程》Django是Python最流行的Web框架之一,它帮助开发者快速、高效地构建功能强大的Web应用程序,接下来我们将从简介、安装到用法详解,... 目录一、Django 简介 二、Django 的安装教程 1. 创建虚拟环境2. 安装Django三、创

python中update()函数的用法和一些例子

《python中update()函数的用法和一些例子》update()方法是字典对象的方法,用于将一个字典中的键值对更新到另一个字典中,:本文主要介绍python中update()函数的用法和一些... 目录前言用法注意事项示例示例 1: 使用另一个字典来更新示例 2: 使用可迭代对象来更新示例 3: 使用

python连接sqlite3简单用法完整例子

《python连接sqlite3简单用法完整例子》SQLite3是一个内置的Python模块,可以通过Python的标准库轻松地使用,无需进行额外安装和配置,:本文主要介绍python连接sqli... 目录1. 连接到数据库2. 创建游标对象3. 创建表4. 插入数据5. 查询数据6. 更新数据7. 删除