多进程multiprocessing-进程池Pool

来源:互联网 发布:华为手机网络诊断 编辑:程序博客网 时间:2024/05/20 07:13

进程池Pool的两种添加任务的方式:异步和同步


异步添加:就是随机的让进程池中空闲的进程去执行任务函数,注意所有任务是一次性添加进入进程池,

只是进程池中的进程随机分配完成所有的任务。

    #Pool.apply_async(要调用的目标,(传递给目标的参数元祖,))    #每次循环将会用空闲出来的子进程随机去调用目标 #pool.close() #pool.join() 必须要关闭进程池,并等待

同步添加:是指一个一个任务添加到进程池,再进行执行,前面的任务没执行完,后面的任务无法添加到进程池中,

所以是有顺序的执行。

    #Pool.apply(要调用的目标,(传递给目标的参数元祖,))    #每次循环将会用空闲出来的子进程随机去调用目标 #pool.close() #pool.join() 必须要关闭进程池,并等待

from multiprocessing import Pool

import os,time,random


def task(msg):

print msg

po = Pool(4)

for i in range(0,10):

#异步方式执行

po.apply_async(task,(i,))

#同步方式执行

po.apply(task,(i,))

po.close()

po.join()


multiprocessing.Pool常用函数解析:

  • apply_async(func[, args[, kwds]]) :使用非阻塞方式调用func(并行执行,堵塞方式必须等待上一个进程退出才能执行下一个进程),args为传递给func的参数列表,kwds为传递给func的关键字参数列表;

  • apply(func[, args[, kwds]]):使用阻塞方式调用func

  • close():关闭Pool,使其不再接受新的任务;

  • terminate():不管任务是否完成,立即终止;

  • join():主进程阻塞,等待子进程的退出, 必须在close或terminate之后使用;


原创粉丝点击