Alluxio源码分析定位策略:最大可用容量优先策略MostAvailableFirstPolicy
来源:互联网 发布:神创天下骑兵升级数据 编辑:程序博客网 时间:2024/05/16 14:45
最大可用容量优先策略MostAvailableFirstPolicy是一种worker可用容量最大的定位策略。如果没有worker合格的话该策略返回null。它的核心方法getWorkerForNextBlock()实现如下:
/** * A policy that returns the worker with the most available bytes. The policy returns null if no * worker is qualified. * 一种worker可用容量最大的定位策略。如果没有worker合格的话该策略返回null。 */@ThreadSafepublic final class MostAvailableFirstPolicy implements FileWriteLocationPolicy { @Override public WorkerNetAddress getWorkerForNextBlock(List<BlockWorkerInfo> workerInfoList, long blockSizeBytes) { // 将输入参数BlockWorkerInfo列表workerInfoList转换成ArrayList形式的列表inputList List<BlockWorkerInfo> inputList = Lists.newArrayList(workerInfoList); // 标志变量:最大可用容量 long mostAvailableBytes = -1; // 被选中的worker地址 WorkerNetAddress result = null; // 遍历BlockWorkerInfo列表inputList,取出每个BlockWorkerInfo,即workerInfo: for (BlockWorkerInfo workerInfo : inputList) { // 如果该workerInfo的可用容量(总容量减去已用容量)大于最大可用容量mostAvailableBytes,则 // 设置标志变量最大可用容量mostAvailableBytes为当前worker的可用容量,设置被选中的worker地址result为当前worker的网络地址 if (workerInfo.getCapacityBytes() - workerInfo.getUsedBytes() > mostAvailableBytes) { mostAvailableBytes = workerInfo.getCapacityBytes() - workerInfo.getUsedBytes(); result = workerInfo.getNetAddress(); } } // 返回被选中的worker地址 return result; }}大体流程如下:
1、将输入参数BlockWorkerInfo列表workerInfoList转换成ArrayList形式的列表inputList;
2、初始化标志变量:最大可用容量mostAvailableBytes为-1;
3、初始化被选中的worker地址result为null;
4、遍历BlockWorkerInfo列表inputList,取出每个BlockWorkerInfo,即workerInfo:
4.1、如果该workerInfo的可用容量(总容量减去已用容量)大于最大可用容量mostAvailableBytes,则:
4.1.1、设置标志变量最大可用容量mostAvailableBytes为当前worker的可用容量;
4.1.2、设置被选中的worker地址result为当前worker的网络地址;
5、返回被选中的worker地址(有可能为null)。
这里,有个问题:什么时候所有worker已用容量会大于总容量,也就是workerInfo.getCapacityBytes() - workerInfo.getUsedBytes()的值会小于等于-1,而导致最终结果返回null呢?即便是某一个worker,什么时候已用容量会大于总容量呢?留待以后再解决吧!
- Alluxio源码分析定位策略:最大可用容量优先策略MostAvailableFirstPolicy
- Alluxio源码分析定位策略:本地优先策略LocalFirstPolicy
- Alluxio源码分析定位策略:循环遍历策略RoundRobinPolicy
- Alluxio源码分析定位策略:指定主机策略SpecificHostPolicy
- Alluxio之定位策略
- Alluxio之定位策略
- OkHttp3源码分析[缓存策略]
- OkHttp3源码分析[缓存策略]
- 蜘蛛抓取策略:广度优先和深度优先分析
- MapReduce 本地化优先策略
- 对SelectionEditPolicy策略的源码分析
- YARN源码分析之ApplicationMaster分配策略
- 品牌定位策略
- Android 定位策略
- Android的定位策略
- 精细化运营分析影响产品定位、运营策略
- Android应用内存泄漏的定位、分析与解决策略
- Android 应用内存泄漏的定位、分析与解决策略
- MySQL锁阻塞分析
- 过采样能提高信噪比
- 集成支付宝钱包支付iOS SDK的方法与经验
- 用户·角色·权限·表
- 正则表达式基本语法
- Alluxio源码分析定位策略:最大可用容量优先策略MostAvailableFirstPolicy
- 【转】UI设计师可不知的安卓屏幕知识(dpi,ppi)
- DataTable添加行的方法
- 类的加载-CLASSPATH 基本使用
- 环境配置_JDK
- opengl 安装与配置
- C++第二次试验——分段函数的运算
- tomcat虚拟路径的几种配置方法
- leetcode_328_Odd Even Linked List(easy)(C++)