spark是什么，就看看
来源：互联网 发布：盘古数据骗局 编辑：程序博客网 时间：2024/05/16 16:55
Spark是一种计算框架，Spark实现的是实时查询、批处理，流处理功能三合一，经常用它和hadoop这个生态系统进行比较。hadoop的计算框架有mapreduce,map reduce每次计算都会把中间过程存在本地hdfs上，这个比较消耗资源和拖慢进程，spark就是直接将中间计算结果存在内存，所以速度很快（？对内存消耗很大吧，能支持么？）
Spark使用的语言是scala最佳，也支持python,Java是可以用的但却不太推荐（不知道为什么）。
所以作为数据分析员可能只需要懂得一些scala语法或者python的来支持自己能够实现算法或者调用库即可。
图片来自网络
阅读全文
0 0
- spark是什么，就看看
- android studio新建模拟器中没选CPU就没法进行下一步了，帮忙看看是什么问题
- android studio新建模拟器中没选CPU就没法进行下一步了，帮忙看看是什么问题
- Spark是什么？
- Spark是什么？
- Spark是什么？
- 科普spark，spark是什么
- spark 之 spark是什么？
- 累了就看看
- 有空就看看数学
- 累了就看看
- 累了就看看
- 累了，就看看
- 看看日本政府机关是什么样子
- 看看，这不是钱是什么？
- 深入看看 __proto__到底是什么
- 是男人的就看看
- 心情不好时就看看
- Eclipse 使用Egit回退版本
- HashMap工作原理
- 云服务器启动tomcat很慢
- 判断ip是否为保留ip
- 《计算机操作系统原理-linux实例分析》_肖竞华_第一章_知识点
- spark是什么，就看看
- 枚举
- [Vue.js破浪]——单文件组件（一）
- eclipse里安装SVN插件
- win10 ubuntu 16.04 双系统安装
- 515. Find Largest Value in Each Tree Row(Java)
- com/fasterxml/classmate/TypeResolver
- 记一次异常停机损坏了orientdb 导致nexus2无法启动
- 在Fragment中嵌套Webview，第一次打开闪屏问题
