hadoop安装教程(转载,超详细)

来源:互联网 发布:python wxpython pyqt 编辑:程序博客网 时间:2024/06/15 02:16

转载:http://www.powerxing.com/install-hadoop/

自己搭建一个hadoop环境。

遇到一个报错:
Error: JAVA_HOME is not set and could not be found.
解决办法:
1、sudo su name切换Linux用户(多个用户都要配置.bashrc)
2、echo $JAVA_HOME 查看Java path
3、vim ~/.bashrc 点开头是隐藏文件,在最后一行加上:
export JAVA_HOME=/usr/lib/jvm/java-8-oracle
该目录下有Java文件,注意Linux用户切换,每个用户都有一个.bashrc文件,做相同配置就可以。
4、source ~/.bashrc 使得文件配置生效

第二个错误:
hadoop安装的是2.6.0版本,对应的Java也应该是Java7而不是Java8,不然会报错JAVA_HOME is not set and could not be found.
在./sbin/start-dfs.sh这一步时,一直报错JAVA_HOME is not set and could not be found.换成Java7也无法解决,最后直接在配置文件头将
export JAVA_HOME=/usr/lib/jvm/java-7-oracle加进去就好了。

第三个错误:
./bin/hdfs dfs -mkdir -p /user/hadoop 运行伪分布式
一直提示找不到路径,原来是路径找错了,
cd /usr/local/hadoop/ 进入此路径下再执行:./bin/hdfs dfs -mkdir -p /user/hadoop

另外的错误是因为漏掉了一个安装步骤,要仔细阅读教程,此次我选择的是伪分布式。

安装成功:
hadoop@ubuntu:/usr/local/hadoop$ ./bin/hdfs dfs -ls /user/hadoop/input
即可查看input下的文件list
这里使用的还是hdfs dfs -ls 命令
我现在在公司里使用的是hadoop fs -ls,hadoop版本不一样,命令也不同。

0 0
原创粉丝点击