体会Python之独具匠心:Python XML PRC server多线程实现及其原理

来源:互联网 发布:化工流程图软件 编辑:程序博客网 时间:2024/05/21 15:04
周末需要调研Python XMLRPC的一些性能问题,发现所说的XML RPC仅支持单线程。网上给出实现多线程的方法,最常见最简便的是继承ThreadingMixIn ,代码给得很全,但是很少有地方说为什么这样可以实现。

因是python新手,所以不太理解,搜了一些资料,现在做整理。

实现的代码:
class RPCThreading(SocketServer.ThreadingMixIn, SimpleXMLRPCServer.SimpleXMLRPCServer):
    pass
global mutex
mutex =thread.allocate_lock()
server_object = Server()
server = RPCThreading(("localhost", 8888))
server.register_instance(server_object)

#Go into the main listener loop
print "Listening"
server.serve_forever()

RPCThreading这个类也可以这样声明
class RPCThreading(ThreadingMixIn, SimpleXMLRPCServer):
    pass
只要代码前端import的模块匹配就可以了。
看这个声明的格式,应该是RPCThreading这个自定义的类,继承了ThreadingMixIn和SimpleXMLRPCServer。
但是自定义方法部分直接pass,什么也没做。
然后server.serve_forever()就可以做到多线程了?
猜测应该是继承的这两个类之间发生一些关键函数的重写,比如前面一个类重写了后面一个类的run函数

参考http://docs.python.org/3.0/library/socketserver.html

Forking and threading versions of each type of server can be created using the ForkingMixIn(多进程) and ThreadingMixIn(多线程) mix-in classes. For instance, a threading UDP server class is created as follows:

class ThreadingUDPServer(ThreadingMixIn, UDPServer): pass

The mix-in class must come firstsince it overrides a method defined in UDPServer. Setting the various member variables also changes the behavior of the underlying server mechanism.

由上面例子可知,能实现多线程(进程)版的server(UDP/TCP/XMLRPC都如此),是由于ThreadingMixIn(ForkingMixIn)类重写了server类中定义的方法。
找到定义ThreadingMixIn的py文件:
体会Python之独具匠心:Python <wbr>XML <wbr>PRC <wbr>server多线程实现及其原理
这里看到process_requst函数中定义了多线程,target指向process_request_thread

而process_request函数在BaseServer类中会被handler()调用,具体如下:
SimpleXMLRPCServer类继承自TCPServer类继承自BaseServer类,
BaseServer类定义了server_forever方法,其中调用了self._handle_request_noblock()方法,这个方法中又调用了self.process_request(request, client_address)
体会Python之独具匠心:Python <wbr>XML <wbr>PRC <wbr>server多线程实现及其原理
应该就是这里的process_request方法被ThreadingMixIn重写之后,变为多线程的方法,所以简单的一句:
class RPCThreading(ThreadingMixIn, SimpleXMLRPCServer):
    pass
就可以实现Server对象的多线程。
真相大白!
Python真的很神奇,匠心独具。
原创粉丝点击