hadoop学习总结
来源:互联网 发布:正规网络彩票关注网站 编辑:程序博客网 时间:2024/05/23 18:32
1、hdfs 分布式文件系统
namenode 分布式文件管理系统的老大,管理着元数据
datanode 存储文件块,默认是128M
secondarynamenode 定期合并namenode上的元数据文件(主要是合并fsimage,通过叫edits的日志文件)
2、mapreduce分布式计算框架
map 完成数据读取,清洗,存储
reduce 对map阶段的数据,进行计算
3、yarn 资源管理平台(掌握他的工作原理)
resourcemanager 它是yarn的老大,统一管理nodemanager
nodemanger 计算节点(节点就是指的一台主机或者服务器)
4、hadoop开机启动
vi /etc/rc.d/rc.local
sh /hadoop/hadoop-2.6.4/sbin/start-all.sh
0 0
- Hadoop学习总结
- hadoop学习总结一
- hadoop学习问题总结
- Hadoop学习总结
- hadoop 学习总结1
- hadoop 学习总结2
- Hadoop 学习总结
- Hadoop学习总结
- Hadoop学习总结
- Hadoop 学习知识点总结
- Hadoop学习总结
- hadoop学习总结
- hadoop学习总结
- hadoop学习总结
- Hadoop学习总结
- hadoop部署过程学习总结
- Hadoop别人的学习总结
- 学习hadoop总结(1)
- zookeeper集群安装详解(Centos系统)
- Stack(5)对栈排序不用循环空间复杂度O(1)
- PTA习题 5-4 是否同一棵二叉搜索树(二叉搜索树的构建以及相同树的判断)
- 网易游戏2017实习生招聘-小结
- Java的SAX解析代码二
- hadoop学习总结
- 如何把自己的项目上传到GitHub上
- BZOJ2618凸多边形
- 读书笔记之--Java虚拟机精讲第六章内存分配与垃圾回收
- 一起学python(四)
- Delphi XE2 and C++ Builder XE2 Update4 HotFix1
- JUnit4单元测试报错问题 :method initializationerror not found
- 通用Adapter的实现套路(ListView篇)
- 【JSOI2007】动态最值 Splay