Python的concurrent.futures模块：简化多线程与多进程编程
在现代计算机应用中，为了充分利用多核CPU的计算能力，多线程和多进程编程成为了常见的手段。Python，作为一种高级编程语言，为我们提供了丰富的库来支持多线程和多进程的编程。其中，concurrent.futures模块是一个相对高级的接口，它简化了多线程和多进程的创建和管理。
一、concurrent.futures模块简介
concurrent.futures模块为异步执行可调用对象提供了高层次的接口。它主要提供了两个类：ThreadPoolExecutor和ProcessPoolExecutor，分别用于创建和管理线程池与进程池。通过这个模块，我们可以非常方便地并行执行任务，而无需关心底层的线程或进程管理细节。
二、ThreadPoolExecutor：线程池
使用ThreadPoolExecutor可以轻松地创建一个线程池，并提交任务给线程池来异步执行。下面是一个简单的示例：
import concurrent.futures
import time
def task(n):
print(f"Processing {
n}")
time.sleep(2) # 模拟耗时操作
return n * n
# 创建一个包含3个线程的线程池
with concurrent.futures.ThreadPoolExecutor(max_workers=3) as executor:
# 提交任务到线程池
futures = [executor.submit(task, i) for i in range(5)]
# 遍历Future对象列表，获取每个任务的结果
for future in concurrent.futures.as_completed(futures):
try:
result = future.result() # 获取任务结果，如果任务抛出异常，这里会重新抛出
print(f"Result: {
result}")
except Exception as exc:
print(f'Error occurred: {
exc}')
在这个示例中，我们创建了一个包含3个线程的线程池，并提交了5个任务到线程池中。每个任务只是简单地打印一个消息，然后休眠2秒钟来模拟耗时操作。我们使用as_completed函数来迭代已完成的Future对象，并获取每个任务的结果。
三、ProcessPoolExecutor：进程池
与线程池类似，ProcessPoolExecutor用于创建进程池。由于进程之间的内存是隔离的，因此进程池特别适合于CPU密集型任务，或者需要避免全局解释器锁（GIL）的场景。下面是一个使用进程池的示例：
import concurrent.futures
import time
import os
def cpu_bound_task(n):
print(f"Processing {
n} in process {
os.getpid()}")
time.sleep(2) # 模拟耗时操作
return n * n
# 创建一个包含3个进程的进程池
with concurrent.futures.ProcessPoolExecutor(max_workers=3) as executor:
futures = [executor.submit(cpu_bound_task, i) for i in range(5)]
for future in concurrent.futures.as_completed(futures):
try:
result = future.result() # 获取任务结果
print(f"Result: {
result}")
except Exception as exc:
print(f'Error occurred: {
exc}')
在这个示例中，我们创建了一个包含3个进程的进程池，并提交了5个CPU密集型任务到进程池中。每个任务打印一个消息和当前进程的PID，然后休眠2秒钟来模拟耗时操作。最后，我们迭代已完成的Future对象并获取每个任务的结果。注意，由于进程间通信的开销较大，因此进程池适合于CPU密集型任务，而不是IO密集型任务。
四、总结
concurrent.futures模块为Python的多线程和多进程编程提供了简洁而强大的接口。通过ThreadPoolExecutor和ProcessPoolExecutor类，我们可以轻松地创建和管理线程池与进程池，从而并行执行任务。这大大提高了程序的执行效率和响应性。在实际应用中，我们可以根据任务的性质和系统的资源来选择使用线程池还是进程池。
文章浏览阅读122次。还是A+BTime Limit: 2000/1000 MS (Java/Others)Memory Limit: 65536/32768 K (Java/Others)Total Submission(s): 24568Accepted Submission(s): 11729Problem Description读入两个小于10000的正整数A和B，计算A+B。...
文章浏览阅读419次。HEADERS：在BASIC的基础上，额外记录了请求和响应的头信息。FULL：记录所有请求和响应的明细，包括头信息、请求体、元数据。BASIC：仅记录请求的方法，URL以及响应状态码和执行时间。NONE：不记录任何日志信息，这是默认值。配置Feign日志有两种方式；方式二：java代码实现。注解中声明则代表某服务。方式一：配置文件方式。_feign 日志设置
文章浏览阅读155次。将容器管理的持久性 Bean 用于面向服务的体系结构本文将介绍如何使用 IBM WebSphere Process Server 对容器管理的持久性 (CMP) Bean的连接和持久性逻辑加以控制，使其可以存储在非关系数据库..._javax.ejb.objectnotfoundexception: no such entity!
文章浏览阅读1.5k次。基础java练习题一、递归实现跳台阶从第一级跳到第n级，有多少种跳法一次可跳一级，也可跳两级。还能跳三级import java.math.BigDecimal;import java.util.Scanner;public class Main{ public static void main(String[]args){ Scanner reader=new Scanner(System.in); while(reader.hasNext()){ _java 递归例题
文章浏览阅读1.5k次，点赞6次，收藏6次。目录1.串应用- 计算一个串的最长的真前后缀题目描述输入输出样例输入样例输出题解2.字符串替换(string)题目描述输入输出样例输入样例输出题解3.可重叠子串 (Ver. I)题目描述输入输出样例输入样例输出题解4.字符串操作（string）题目描述输入输出样例输入样例输出题解1.串应用- 计算一个串的最长的真前后缀题目描述给定一个串，如ABCDAB，则ABCDAB的真前缀有：{ A, AB,ABC, ABCD, ABCDA }ABCDAB的真后缀有：{ B, AB,DAB, CDAB, BCDAB_对存储在string数组内的所有以字符‘a’开始并以字符‘e’结尾的单词做加密处理。
文章浏览阅读68次。西安交通大学/算法设计与问题求解/树与二叉树/MOOC_算法设计与问题求解西安交通大学
文章浏览阅读1.6k次。问题：在Vue项目中出现如下错误提示：[Vue warn]: Computed property "totalPrice" was assigned to but it has no setter. (found in <Anonymous>)代码：<input v-model="totalPrice"/>原因：v-model命令，因Vue 的双向数据绑定原理 ， 会自动操作 totalPrice， 对其进行set 操作而 totalPrice 作为计..._computed property "totalprice" was assigned to but it has no setter.
文章浏览阅读60次。十分暴力而简洁的解决方式：读取P和T的位置并自动生成唯一正确答案，将题给测点与之对比，不一样就给我爬！_basic 1003 case 1
文章浏览阅读422次。原标题：详解将Web项目War包部署到Tomcat服务器基本步骤详解将Web项目War包部署到Tomcat服务器基本步骤1 War包War包一般是在进行Web开发时，通常是一个网站Project下的所有源码的集合，里面包含前台HTML/CSS/JS的代码，也包含Java的代码。当开发人员在自己的开发机器上调试所有代码并通过后，为了交给测试人员测试和未来进行产品发布，都需要将开发人员的源码打包成Wa..._/opt/bosssoft/war/medical-web.war/web-inf/web.xml of module medical-web.war.
文章浏览阅读3k次，点赞3次，收藏13次。# -*- coding: utf-8 -*-# 简述：这里有四个数字，分别是：1、2、3、4#提问：能组成多少个互不相同且无重复数字的三位数？各是多少？def f(n):list=[]count=0for i in range(1,n+1):for j in range(1, n+1):for k in range(1, n+1):if i!=j and j!=k and i!=k:list.a..._python求从0到9任意组合成三位数数字不能重复并输出
文章浏览阅读1k次，点赞3次，收藏2次。<el-table-column prop="studentSex" label="性别" :formatter="sex"></el-table-column>然后就在vue的methods中写方法就OK了methods: { sex(row,index){ if(row.studentSex == 1){ return '男'; }else{ return '女'; }..._elementui table 性别
文章浏览阅读1.1k次。java文件操作之移动文件到指定的目录_java中怎么将pro.txt移动到design_mode_code根目录下