clusterdata-2011-2 谷歌集群数据分析(三)
来源:互联网 发布:中国科技成果数据库 编辑:程序博客网 时间:2024/06/04 18:05
现在想找这么一种数据,该作业在每次调度时会以不同的方式执行,例如第一次以并行度为3的方式执行,第二次以并行度为5 的方式执行,然后比较不同并行度下作业的执行时间。
1、一个作业在多次调度时,每一次分配的Job ID是不同的,如下图,Job name为 “”VRH1Jd5MGmAfJ9/rKwhsafRxNYi77rYxgsgb1q2OJw=” 的作业在提交(0)完成(4)过程中的Job ID(第3个属性)都是不同的。
其中Job ID 为6251675381的作业执行情况:
Job ID 为6251752722的作业执行情况:
Job ID 为6251835479的作业执行情况:
还有一个作业也是多次调度执行:
这两个作业虽然多次调度执行,但每次调度时都是顺序执行,我想找这么一种数据,该作业在每次调度时会以不同的方式执行,例如第一次以并行度为3的方式执行,第二次以并行度为5 的方式执行,然后比较不同并行度下作业的执行时间。但是现在还没找到多次调度且并行执行的作业
找到一个多次调度并且有并行运算的任务,不过这个任务调度过程中被杀死了:
发现了一个有意思的现象,将调度类型为3(对延迟比较敏感)的作业筛选出来,发现所有作业都如上图所示,在执行过程中被杀死,而且都没有顺利执行完成,event type没有4出现。
阅读全文
1 0
- clusterdata-2011-2 谷歌集群数据分析(三)
- clusterdata-2011-2 谷歌集群数据分析(一)
- clusterdata-2011-2 谷歌集群数据分析(二)--task_usage
- 数据分析(三)
- 数据分析(三)
- Wireshark 数据分析(三)
- 大数据分析技术研究报告(三-2)
- 三、Mp3帧分析(数据帧)
- 数据挖掘(三)关联分析
- dataserver 源码分析(三) 读写数据
- Spark大数据分析(三)
- 数据分析之旅(三)
- python数据分析实践(三)
- [ArcGIS] 空间分析(三)栅格数据
- 利用Python进行数据分析(三)
- 招聘数据分析<三>
- [吓死之前转载]耗电103兆瓦!揭秘谷歌集装箱数据中心
- 实时数据分析平台、大数据分析、MPP数据仓库 - vertica (三)高级库内分析
- C语言实现trcpy和memcpy
- Codeforces883M-Quadcopter Competition
- Eclipse 打不开splash界面直接关闭
- 【洛谷 P1902】 刺杀大使
- PostgreSQL小数修约
- clusterdata-2011-2 谷歌集群数据分析(三)
- 洛谷P1036 NOIP2002 选数(dfs)
- RecyclerView的使用
- 关于Java实现朴素贝叶斯算法
- 从零开始学习OpenCL开发(九)深入API
- NOIP[靶形数独]深度优先搜索
- CSS 相对定位与绝对定位
- Leetcode 14 Longest Common Prefix
- 向jre中添加安全证书