Hadoop版本第一代的配置以及升级总结

来源:互联网 发布:魔卡幻想淘宝号 编辑:程序博客网 时间:2024/05/02 17:49

  经过这几天不停的配置,换了几个版本,感觉到很头疼,但是升级完成之后就感觉轻松许多。博客中转载有一篇文章是Hadoop升级的详细说明,这里说一下体会。

  Hadoop第一代配置经过几次配置之后没有多少难度,分为几个步骤,第一个是网络,第二个是安装jdk,第三个是配置ssh,两个文件或文件夹的权限要设置正确才行。第四个就是hadoop的配置了。在升级时,由于只需要改变hadoop的配置,所以在以前配置的基础上只修改hadoop的版本就行了,具体见hadoop升级的博客。

  重新启动集群时要先格式化,这个时候把slave节点上的dfs.data.dir下面的全部删除,将临时文件也删除掉,dfs.name.dir下的文件就就不要动了,然后用命令格式化就行了,集群就起了。不要删除以前的dfs.name.dir,否则不能格式化成功,因为格式化时是Re-format,所以以前的文件必须要有才能再一次格式化。

   要重新配置一个zookeeper或者是Hbase,可以将以前配置好的scp过来,就可以减少很多麻烦,可以删除掉logs。

0 0
原创粉丝点击