python学习_多线程

一,GIL(全局解释器锁), 这个东西争议很大,至少我是不赞成的(屌丝反对无效).  GIL的意思是任何时候只有一个CPU在运行, 也就是把你的多核机器变成一个单核机器. 好处是从根本上保证了线程安全,  坏处是使本来效率就很差的python变得更低效了. 

1,print在多线程下打印可能会乱,尽量使用sys.stdout.write()

2,python的 error trace是分线程进行的, 

3,一个线程挂掉并不会影响其他线程运行,即不会导致整个程序挂掉

二,thread 模块

  thread是一个比较偏向底层的模块, 只提供了很少的功能:

1,start_new_thread(func, args, kwargs=None)  这个函数类似于C++中pthread_create, 就是开启一个线程并运行func函数, 其参数与apply完全一致

2,锁, allocate_lock(): 生成一个锁, 锁可以通过acquire()和release()加锁/解锁

3, thread不提供join和detach之类的东东

三, threading模块

threading更偏向应用, 提供了非常多的功能

1,启动线程, threading提供了三种方法启动一个线程:

    a)创建一个Thread实例,传给它一个函数, 跟thread模块有点类似

    b)创建一个thread实例,传给它一个可调用的类对象,即定义了__call__()的类, 有点像C++中的仿函数

    c)从Thread派生一个子类,重载run()函数,再创建一个实例, 这种方法比较强大,较复杂的程序一般采用这种

2,Thread用start()开始, 可以用一个join()连接

3,threading提供条件判断condition,类似于C++中的pthread_cond_t

    a)condition通过wait和notify进行通信

    b)wait和notify必须被acquire和release包围,否则会报错

    c)因为需要acquire,所以condition一次notify只能唤醒一个wait的线程, 这很可能与设计不符,因为:1,不能将所有wait的线程同时唤醒, 2,唤醒的事件要发生多次. 所以如果需要多个线程同时等待一个条件,请用event

4,threading提供了另一个条件判断event,可以支持多个线程同时等待一个条件

    a)event通过wait和set进行通信

    b)可以用clear进行清除

四,Queue模块

顾名思义,Queue是一个线程安全的队列, (都有GIL了,能不线程安全么)

1,使用put(item,block=0)加入元素  get(block=0) 取出元素, block!=0 表示将一直阻塞到可以get/put

2,提供辅助函数 qsize(): 返回队列大小, empty,()full()判空/满

五, multiprocessing模块(需要python2.6或以上)

     想避开GIL? 想充分利用多核CPU? OK,总有办法的, 那就是用multiprocessing实现多进程

1,multiprocessing的API基本与threading模块一样, 会了threading基本就等于会了这个

2,避开GIL也就意味着没有免费的线程安全保证,  所以请用mutex保证线程安全

3,进程和线程总是有区别的, 但是大部分情况下不影响使用

4,如果真的很看重效率,最好还是用C++,python不擅长这个