Ubuntu安装单机版hadoop注意事项

来源:互联网 发布:昆明医科大学网络课程 编辑:程序博客网 时间:2024/05/20 18:45

网上Ubuntu安装单机版的案例教程很多,本人参考

:http://www.linuxidc.com/Linux/2015-04/116447.htm

进行安装。在创建hadoop用户以及更改权限时,在系统设置的界面可以把hadoop设置为管理员,从而具有root 的权限。比如可以进入root目录等。

1.创建ssh

使用 sudo apt-getinstallssh openssh-server 命令可以方便的创建ssh,但是在设置ssh无密码登录时,ssh-keygen -t rsa -P “”该命令必须是大写P,而不能是小写。

2.新版的hadoop在配置文件时,所有的配置文件在etc中,且mapred-site.xml文档更换为yarn-site.xml.即对yarn-site.xml进行相关设置。


3.启动hadoop后,运行Wordcount案例时,出现wordcount hdfs://localhost:9000/input not exist错误提示。这是因为在安装好hadoop并启动后,测试案例时只在本地硬盘建立了input文件夹,而没有把input中的文件上传至hdfs所致,首先使用

、bin/hadoop fs -mkdir /input

在hdfs上创建输入文件夹目录。然后把本地硬盘上的文件传进input里面:(具体的文件路径有所不同)

bin/hadoop fs -put ~/hadoop/input/README.txt /input

4.另外,也要注意Ubuntu的版本,hadoop是在32位环境下编译的,运行在64位Ubuntu的时候可能会有native数据库加载异常提醒。


0 0
原创粉丝点击