【云星数据---Apache Flink实战系列(精品版)】:Apache Flink实战基础005--flink特性:flink的生态系统和Hadoop生态系统

来源:互联网 发布:十大巅峰网络玄幻小说 编辑:程序博客网 时间:2024/06/14 19:26

四、flink的生态系统

这里写图片描述

flink和开源大数据处理的各种框架有很好的集成,这样它就能和其他框架密切合作形成大数据的统一的解决方案。flink支持YARN,HDFS,Kafka,hbase,alluxio等其他大数据系统的集成。

flink生态系统

flink也积极融入到大数据生态圈和现有的大数据处理方案继续良好的融合,以降低大数据开发的难度。

这里写图片描述

spark生态系统

flink的生态系统和spark很相似,他们的目标都是做大数据通用的处理框架。现阶段spark的工程实现上要更好一些,当然flink也不容小觑,flink在其他国家也有不少拥趸者!

这里写图片描述

flink和spark都在努力的打造以自己为中心的大数据生态系统。在现阶段spark是具有一定优势,但是flink凭借着其优秀的架构,先进的设计,良好的势头,在大数据领域中也能占据一席之地。

五、flink能与Hadoop系统高度兼容

1.与Hadoop系统高度兼容

这里写图片描述

1.flink支持Hadoop的Writeable类型2.flink支持Hadoop Input/Output格式3.flink支持Hadoop Map and Reduce UDF(用户自定义函数)4.flink支持把现有Hadoop的代码无缝运行到flink上。

2.支持Hadoop UDF的代码迁移

这里写图片描述

阅读全文
0 0