使用Thrift的网络框架搭建一般性网络应用

Idea的提出

Thrift 存在的一些问题：

• 相比于protobuf，Thrift的序列化和反序列化性能表现欠佳，大概比protobuf慢10倍。
• 相比于其他RPC框架，Thrift拥有优秀的底层通信框架。（作者简单比较过thrift和grpc1.0的通信框架，grpc的设计实在太过简单。）

由此提出猜想和假设：

• 将 Thrift 的底层通信框架抛离出Thrift框架，利用其来构建一般性的网络应用。
• 组合 Thrift 的底层通信框架 和 protobuf序列化协议，使之成为一个新的RPC框架。

从实现难度和工作量上的考虑，本文尝试实现第一个假设，“将 Thrift 的底层通信框架抛离出Thrift框架，利用其来构建一般性的网络应用”。第二个假设希望日后，作者在时间和精力富余的时候再进行试验。

使用Thrift的网络框架搭建一般性网络应用的优点

• 快速搭建网络应用，节省时间成本
• 当Thrift协议序列化和反序列化成为系统性能瓶颈时，可对其进行替换，同时又能保留Thrift的网络框架，减少对上下游系统的影响

如何操作

有两种方法：

• 在IDL文本中，将自定义协议的结构体存为一个thrift的string变量。
• 构建自定义的Processor类

下面对这两种方法做详细介绍：

在IDL文本中，将自定义协议的结构体存为一个THRIFT的STRING变量

举例：

namespace cpp com.thrift.teststruct Parameter{    1: required string bin_data;}service DemoService{    i32 demoMethod(1:string param1, 2:Parameter param2);}

将新的协议序列化后的数据放入bin_data中，这种方法缺点是，自己定义的协议，还要被thrift的序列化反序列协议包裹，不能完全消除thrift序列化和反序列化的代价。

第一种方法太过简单和粗糙，因此经过挖掘thrift代码后，探索出了更精细的方法。

构建自定义的PROCESSOR类

Thrift 底层通信模块的四大基类，TServer、TProcotol、TProcessor、TTransport，其中TProcessor::process是负责处理具体业务逻辑入口。

class TProcessor { public:  virtual ~TProcessor() {}  virtual bool process(boost::shared_ptr<protocol::TProtocol> in,                        boost::shared_ptr<protocol::TProtocol> out) = 0;  bool process(boost::shared_ptr<apache::thrift::protocol::TProtocol> io) {    return process(io, io);  } protected:  TProcessor() {}};

因此，只要自定义实现TProcessor的基类，重写process方法，就能自定义自己的网络应用。

下面是一个Hello world应用的简单实现：

首先实现一个HelloWorldProcessor 类。’

class HelloWordProcessor : public apache::thrift::TProcessor {public:  virtual bool process(boost::shared_ptr<apache::thrift::protocol::tprotocol> in, boost::shared_ptr</apache::thrift::protocol::tprotocol><apache::thrift::protocol::tprotocol> out) {    out->writeBinary("Hello world!");    out->getTransport()->flush();    out->getTransport()->close();    GlobalOutput.printf("send bytes %s", "Hello world!");    return true;  }};

然后构建main函数，本实例使用TSimpleServer模型

using namespace std;using namespace apache::thrift;using namespace apache::thrift::processor;using namespace apache::thrift::protocol;using namespace apache::thrift::transport;using namespace apache::thrift::server;int main(int argc, char **argv) {boost::shared_ptr<tprotocolfactory> protocolFactory(new TBinaryProtocolFactory());boost::shared_ptr<tprocessor> processor(new UwsgiProcessor());boost::shared_ptr<tservertransport> serverTransport(new TServerSocket(9090));boost::shared_ptr<ttransportfactory> transportFactory(new TBufferedTransportFactory());TSimpleServer server(processor,  serverTransport,  transportFactory,  protocolFactory);printf("Starting the server...\n");server.serve();printf("done.\n");return 0;}

最后编译、链接和运行。

简单实现一个socket客户端，发送请求，就能得到HelloWord。

性能测试

待完善

Thrift 底层通信框架的优化和调优

待完善

本文小结

作者写本文，正是在工作中遇到了一些真实的问题，比如thrift序列化反序列化慢，thrift底层那么优秀的通信框架如何更高的加以利用呢？因此带着工作中的一些问题，开始阅读thrift的源代码。

除了本文中的一些实例，作者还做了一个小的代码库，里面就用到了本文中的方法，单独使用了thrift了网络框架，Github地址如下：https://github.com/zuocheng-liu/GI。

转载请注明来源，原地址保持永久更新。 
博客首页：作程的技术博客 
文章标题：《使用Thrift的网络框架搭建一般性网络应用》 
本文链接：https://it.zuocheng.net/build-common-networks-app-with-thrift-io-framework-zh

.