Spark编程模型(RDD编程模型)

来源:互联网 发布:js实现页面加载动画 编辑:程序博客网 时间:2024/06/07 01:16
Spark编程模型(RDD编程模型)

 

下图给出了rdd 编程模型,并将下例中用 到的四个算子映射到四种算子类型。spark 程序工作在两个空间中:spark rdd空间和 scala原生数据空间。在原生数据空间里, 数据表现为标量(即scala基本类型,用橘 色小方块表示)、集合类型(蓝色虚线 框) 和持久存储(红色圆柱)。

 

 

 

原创粉丝点击