Spark核心概念

来源:互联网 发布:php get参数加密 编辑:程序博客网 时间:2024/06/06 08:36

Spark核心概念简介

        一个Spark应用都由驱动器程序发起集群上的各种并发操作,一个驱动器程序一般包含多个执行器节点,驱动器程序通过一个SaprkContext对象访问saprk。RDD(弹性分布式数据集)——分布式的元素集合,RDD支持两种操作:转化操作、行动操作,如map、reduce函数。


0 0
原创粉丝点击