linux安装hadoop教程

来源:互联网 发布:自由行 软件 编辑:程序博客网 时间:2024/06/11 21:31
一 安装jdk,配置jdk环境变量
1、下载linux版本jdk
2、vim 打开/etc/profile,加入以下配置
输入命令:vim /ect/profile,然后按 i 进行编辑模式输入以下内容
export JAVA_HOME=<java安装目录>
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
3、输入 source /etc/profile 命令,让配置立即生效
二 安装hadoop
1、下载hadoop,解压缩 tar -zxvf <包名>
2、切换到conf目录下,修改一下四个配置文件配置文件
1、hadoop-env.sh
export JAVA_HOME=该为自己java的路径
2、core-site.xml
配置三个属性:
//hadoop的工作目录 ,在/hadoop下面
<property>
         <name>hadoop.tmp.dir</name>
         <value>/hadoop</value>
     </property>
//表示文件系统NameNode该如何访问
<property>
        <name>fs.default.name</name>
        <value>hdfs:imooc:9000</value>
    </property>
//访问的hadoop的端口
<property>
        <name>dfs.name.dir</name>
        <value>/hadoop/name</value>
    </property>
3、hdfs-site.xml
配置一个属性:
//数据的存放目录
<property>
        <name>dfs.data.dir</name>
        <value>/hadoop/data</value>
    </property>
4、mapred-site.xml
配置一个属性:
//
<property>
        <name>mapred.job.tracker</name>
        <value>imooc:9001</value>
    </property>
3、配置hadoop的安装路径
1、打开etc/profile进行编辑,添加export HADOOP_HOME=<hadoop安装路径>
2、在PATH里加入HADOOP_HOME
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$PATH
4、在hadoop目录的bin目录下对namenode进行格式化
hadoop namenode -format
5、启动hadoop
1、在bin目录下运行 start-all.sh
2、用jps命令查看进程
6、查看hadoop下面的文件
hadoop fs -ls
原创粉丝点击