Spark2.2内核剖析

来源:互联网 发布:sql增加数据 编辑:程序博客网 时间:2024/06/05 23:46

目录

1、master启动过程

2、worker启动过程

3、driver启动过程

4、任务提交过程

5、总结sprak集群的启动和任务提交

6、RDD内部详解

7、stage划分算法

8、task提交算法

9、shuffle机制

10、spark缓存机制

11、spark存储模块