python 多进程

来源:互联网 发布:云流量软件 编辑:程序博客网 时间:2024/05/17 02:14

多进程:

fork:

import os
pid = os.fork()if pid == 0:         #如果是子进程    os.getpid()      #获得当前进程id    os.getppid()     #获得父进程idelse:    pid              #所产生的子进程id    os.getpid()      #当前进程id


和linux下的fork函数一样,但是fork不能在windows下使用。

我们可以考虑用multiprocessing模块,multiprocessing模块是跨平台的,但是在windows下创建进程还是会出问题

multiprocessing.Process

from multiprocessing import Process      #multiprocessing模块的Process类def run_proc(name):    passp = Process(target=run_proc, args=('process_name',))p.start()p.join()
还可以通过Pool模块一次性启动大量进程(以进程池的方式

multiprocessing.Pool

from multiprocessing import Pool         #multiprocessing模块的Pool类def long_time_task(name):    passp = Pool(4)                             #默认是当前cpu核数multiprocessing.cpu_countfor i in range(5):                         p.apply_async(long_time_task,args=(i,)) #生成5个进程,由于当前cpu核数为4个,所以只能先一次性生成4个进程,等其中一个运行完了,再生成一个p.close()                               #不允许再加进程了p.join()

subprocess

import subprocessprint('$ nslookup www.python.org')r = subprocess.call(['nslookup', 'www.python.org'])print('Exit code:', r)

生成外部进程(之前的都是父进程生成子进程)

进程通信

很多方法,自己找进程通信库吧,队列、管道、消息、共享内存等等

from multiprocessing import Queue

from multiprocessing import Pipes

。。。

参考:

http://www.liaoxuefeng.com/wiki/0014316089557264a6b348958f449949df42a6d3a2e542c000/001431927781401bb47ccf187b24c3b955157bb12c5882d000

0 0
原创粉丝点击