Hadoop版本第一代的配置以及升级总结
来源:互联网 发布:魔卡幻想淘宝号 编辑:程序博客网 时间:2024/05/02 17:49
经过这几天不停的配置,换了几个版本,感觉到很头疼,但是升级完成之后就感觉轻松许多。博客中转载有一篇文章是Hadoop升级的详细说明,这里说一下体会。
Hadoop第一代配置经过几次配置之后没有多少难度,分为几个步骤,第一个是网络,第二个是安装jdk,第三个是配置ssh,两个文件或文件夹的权限要设置正确才行。第四个就是hadoop的配置了。在升级时,由于只需要改变hadoop的配置,所以在以前配置的基础上只修改hadoop的版本就行了,具体见hadoop升级的博客。
重新启动集群时要先格式化,这个时候把slave节点上的dfs.data.dir下面的全部删除,将临时文件也删除掉,dfs.name.dir下的文件就就不要动了,然后用命令格式化就行了,集群就起了。不要删除以前的dfs.name.dir,否则不能格式化成功,因为格式化时是Re-format,所以以前的文件必须要有才能再一次格式化。
要重新配置一个zookeeper或者是Hbase,可以将以前配置好的scp过来,就可以减少很多麻烦,可以删除掉logs。
0 0
- Hadoop版本第一代的配置以及升级总结
- nginx学习总结二(nginx的启动停止以及版本平滑升级)
- nginx学习总结二(nginx的启动停止以及版本平滑升级)
- hadoop的版本演变以及其他
- 用git 升级版本的一些总结
- 升级应用编译SDK23版本的总结
- Tensorflow的CUDA升级,以及相关配置
- 马斯克:第一代特斯拉“完全不安全”,然而2019年它的升级版就来了
- SAP增强总结-第一代增强
- sublime text 3 插件CodeFormatter 的配置以及MAC上升级php自带版本到php7
- Hadoop之HDFS的配置---secondarynode版本
- Android 有关SQLite的使用以及数据库版本的升级
- 博客总结九——Hadoop、Redis配置以及编程珠玑第二章的思考
- iOS提示有新版本以及版本升级的问题
- 大数据学习笔记之二十八 Hadoop的第一代MapReduce MRV1
- hadoop-HA Hadoop 2.2.0版本HDFS的HA配置
- hadoop版本总结
- hadoop版本总结
- 2014.4月问题种种
- ACM分类学习计划
- win764位debug解决方法
- 第七周 作业循环大战
- 实现复数类中运算符的重载(利用友元函数)
- Hadoop版本第一代的配置以及升级总结
- 上帝只掌握一半
- 蚁群算法(ACA)解TSP代码
- 网页设计中常用的高度和宽度
- 皮肤保养
- 书写优雅的shell脚本(一)- if语句
- 在drawable里面添加图片 R文件没反应的解决
- 8周项目1
- enum should not be used as an identifier since it is a reserved keyword from source level 1.5 on