CentOS上安装Hadoop0.23

来源:互联网 发布:测试端口是否通 linux 编辑:程序博客网 时间:2024/05/22 12:56
0. 能上网是必须的,否则很难。
1. 安装java  
      jdk-6u22-linux-i586-rpm.bin ,下载里直接执行。
2. 安装c++  ,第5步用的。
        yum install gcc-c++
3. 下载hadoop 0.23
       先装svn
       yum install subversion 
     svn checkout 
          http://svn.apache.org/repos/asf/hadoop/common/tags/release-0.23.0-rc1/
         这个很漫长。
4. 下载安装maven
        apache-maven-3.0.3-bin.tar.gz
       解压缩,改名,放到/usr/local下面,然后配置环境变量 .bash_profile
       M3_HOME=/usr/local/maven
       PATH=%PATH:%M3_HOME/bin
5. 下载protobuf 这个是必须的,否则编译hadoop-yarn-api失败,MapReduce用。
       http://protobuf.googlecode.com/files/protobuf-2.4.1.tar.gz
        tar zxvf protobuf-2.4.1.tar.gz
        进目录
        ./configure
        make
        make install
6.  编译吧。
      mvn package -Pdist -DskipTests -Dtar
      首次编译会超级漫长。
      完后在
      hadoop-project-dist/target/hadoop-project-dist-0.23.0-SNAPSHOT/share/hadoop/UNDEF/
      里面就出来东西了。
     hadoop-project-dist-0.23.0-SNAPSHOT.jar
     hadoop-project-dist-0.23.0-SNAPSHOT-tests.jar
原创粉丝点击