[读书笔记]Yarn RPC实现
来源:互联网 发布:java关闭线程池 编辑:程序博客网 时间:2024/06/07 05:20
hadoop技术内幕-----深入解析YARN架构设计与实现原理
类图摘自书中第65页(以server端为例)
自下向上:
yarn_server_common_service_protos.proto 文件中采用protocol buffer语法定义了RPC函数的参数和返回值,即定义了protocol buffer中的序列化部分,主要包括RegisterNodeManagerRequestProto,RegisterNodeManagerResponseProto,NodeHeartbeatRequestProto,NodeHeartbeatResponseProto
为了方便java使用,又对protocol buffer生成的java代码进行了封装,并抽象出四个接口,接口分别是RegisterNodeManagerRequest,RegisterNodeManagerResponse,NodeHeartbeatRequest,NodeHeartbeatResponse,四种接口对应的PB实现分别为RegisterNodeManagerRequestPBImpl,RegisterNodeManagerResponsePBImp,NodeHeartbeatRequestPBImp,NodeHeartbeatResponsePBImp,
ResourceTracker.proto文件中采用protocol buffer语法定义了RPC函数,但并未提供具体实现,需要自定义实现RPC函数,自定义实现为ResourceTrackerService,在ResourceTrackerPBServiceImpl中直接调用ResourceTrackerService即可。
- [读书笔记]Yarn RPC实现
- YARN RPC实现
- Hadoop YARN RPC实现
- Yarn中的DEFAULT_IPC_RPC_IMPL(default rpc 实现类)
- Yarn中ResourceManager的RPC协议
- YARN RPC应用实例(1)
- YARN RPC应用实例(2)
- YARN RPC应用实例(3)
- Yarn核心——RPC(3) YarnRPC
- Yarn核心——RPC(2) Hadoop RPC
- HDFS、YARN、MapReduce原理--读书笔记
- [读书笔记]深入解析MapReduce架构设计与实现原理——CH4 Hadoop RPC基本框架
- Yarn中ResourceManager相关三大RPC协议
- Hadoop2源码分析-YARN RPC 示例介绍
- spark on yarn(ERROR client.TransportClient: Failed to send RPC)
- Yarn核心——RPC(1) 动态代理
- 使用hadoop RPC实现RPC调用
- Rpc原理与实现
- android4.0 USB Camera实例(一)JNI层
- 第1章 引言
- 使用Cocos2d-lua开发植物大战僵尸12-碰撞检测
- ASP.NET支持表单中上传HTML代码的简单方法(不安全)
- Java的几种对象(POJO,PO,DTO,VO,DAO)
- [读书笔记]Yarn RPC实现
- Android沉浸式状态栏
- Quicksum
- tableView中deselectRowAtIndexPath的作用
- 解决ListView中多选功能使用CheckBox勾选混乱问题
- crontab service command not found
- 更新Pods私有库时候遇到的错误
- typedef与#define
- android 自定义控件方法以及实例