大数据学习知识点

来源:互联网 发布:js截取无限循环小数 编辑:程序博客网 时间:2024/06/07 03:49

文件存储:Hadoop HDFSTachyonKFS

离线计算:Hadoop MapReduceSpark

流式、实时计算:StormSpark StreamingS4Heron

K-VNOSQL数据库:HBaseRedisMongoDB

资源管理:YARNMesos

日志收集:FlumeScribeLogstashKibana

消息系统:KafkaStormMQZeroMQRabbitMQ

查询分析:HiveImpalaPigPrestoPhoenixSparkSQLDrillFlinkKylinDruid

分布式协调服务:Zookeeper

集群管理与监控:AmbariGangliaNagiosCloudera Manager

数据挖掘、机器学习:MahoutSpark MLLib

数据同步:Sqoop

任务调度:Oozie

原创粉丝点击