python多进程

来源:互联网 发布:如何用手机淘宝装修 编辑:程序博客网 时间:2024/05/16 09:23

概念
进程是程序在计算机上的一次执行活动。当你运行一个程序,你就启动了一个进程。显然,程序是死的(静态的),进程是活的(动态的)。进程可以分为系统进程和用户进程。凡是用于完成操作系统的各种功能的进程就是系统进程,它们就是处于运行状态下的操作系统本身;用户进程就不必我多讲了吧,所有由你启动的进程都是用户进程。进程是操作系统进行资源分配的单位。
它的思想简单介绍如下:在操作系统的管理下,所有正在运行的进程轮流使用CPU,每个进程允许占用CPU的时间非常短(比如10毫秒),这样用户根本感觉不出来CPU是在轮流为多个进程服务,就好象所有的进程都在不间断地运行一样。但实际上在任何一个时间内有且仅有一个进程占有CPU
•多进程和多线程的区别:
•多线程使用的是cpu的一个核,适合io密集型
•多进程使用的是cpu的多个核,适合运算密集型

•组件
•Python提供了非常好用的多进程包,multiprocessing,我们在使用的时候,只需要导入该模块就可以了。
Multiprocessing支持子进程,通信,共享数据,执行不同形式的同步,提供了Process,Pipe, Lock等组
多进程
Process
1. 创建一个Process对象
p = multiprocessing.Process(target=worker_1, args=(2, ))
target = 函数名字
args = 函数需要的参数,以tuple的形式传入
注意: 单个元素的tuple的表现形式

multprocessing用到的两个方法
cpu_count() 统计cpu总数
active_children() 获得所有子进程

  1. Process的常用方法
    is_alive() 判断进程是否存活
    run() 启动进程
    start() 启动进程,会自动调用run方法,这个常用
    join(timeout) 等待进程结束或者直到超时

  2. Process的常用属性
    name 进程名字
    pid 进程的pid

示例:

import timeimport multiprocessing#统计cpu个数p = multiprocessing.cpu_count()print (p)def worker(interval):    time.sleep(interval)    print("hello word")if __name__ == '__main_':    p=multiprocessing.Process(target=worker,args=(5,))    p.start()    print(p.is_alive())    p.join("end mian")    print (p.name)    print  (p.pid)

结果:
4
end mian
Process-1
6460
hello word

import timeimport multiprocessingdef worker(name, interval):    print("{0} start".format(name))    time.sleep(interval)    print("{0} end".format(name))if __name__ == '__main__':    print("mian start")    print ("this computer cpu has {0}".format(multiprocessing.cpu_count()))    p1 = multiprocessing.Process(target=worker, args=("worker1",2))    p2 = multiprocessing.Process(target=worker, args=("worker2",3))    p3 = multiprocessing.Process(target=worker, args=("worker3",4))    p1.start()    p2.start()    p3.start()    for p in multiprocessing.active_children():        print ("the pid of {0} is {1}".format(p.name,p.pid))    print("main end")

mian start
this computer cpu has 4
worker1 start
worker2 start
the pid of Process-2 is 7563
the pid of Process-1 is 7562
the pid of Process-3 is 7564
main end
worker3 start
worker1 end
worker2 end
worker3 end