Hadoop 学习第一步 ,Hadoop环境搭建
来源:互联网 发布:淘宝店铺最怕什么 编辑:程序博客网 时间:2024/05/16 12:20
1、 安装jdk:apt-get install openjdk-7-jdk
2、 vim /etc/profile
修改环境变量:
export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
说明:设置完环境变量则能在任意目录下访问java,javac,进行编译运行java程序
2、 安装Hadoop: wgethttp://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz
mvhadoop-1.2.1.tar.gz /opt/
cd /opt/
Ls
tar -zxvf hadoop-1.2.1.tar.gz
Ls
进入hadoop目录进行配置:
cdhadoop-1.2.1/
Ls
cd conf
ls 这里面的四个文件需要配置
1,vim hadoop-env.sh
export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64
2,sudo vim core-site.xml
<configuration>
<property>
<name>hadoop.tmp.dir</name>
<value>/hadoop</value>
</property>
<property>
<name>dfs.name.dir</name>
<value>/hadoop/name</value>
</property>
<property>
<name>fs.default.name</name>
<value>hdfs://server010:9000</value>
</property>
</configuration>
3,sudo vim hdfs-site.xml
<configuration>
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
</configuration>
4,sudo vim mapred-site.xml
<property>
<name>mapred.job.tracker</name>
<value>server010:9001</value>
</property>
5,配置hadoop变量:
sudo vim /etc/profile
export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64
export JRE_HOME=$JAVA_HOME/jre
export HADOOP_HOME=/opt/hadoop-1.2.1
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$PATH
让设置生效:
source /etc/profile
最后一步,使用Hadoop 命令,查看是否安装成功:
Hadoop
正式使用前对Hadoop的namenode 初始化:
hadoop namenode format
- Hadoop 学习第一步 ,Hadoop环境搭建
- Hadoop 学习第一步 ,Linux环境搭建
- hadoop学习环境搭建
- 学习hadoop--第一步
- Hadoop学习笔记-Hadoop HDFS环境搭建
- Hadoop学习四:hadoop分布式环境搭建
- 构建Spark分布式集群第一步:搭建Hadoop伪分布式环境
- Hadoop学习-基础环境搭建
- hadoop学习linux环境搭建
- hadoop学习(day01)-环境搭建
- Hadoop学习之二《Hadoop环境伪分布式环境搭建》
- Hadoop学习笔记-搭建源码学习环境
- 【hadoop】hadoop环境快速搭建
- Hadoop - Hadoop开发环境搭建
- hadoop学习过程-2013.08.20--搭建hadoop环境
- hadoop学习笔记2:hadoop分布式环境搭建
- Hadoop学习笔记(一)-- Hadoop环境搭建
- Hadoop学习笔记之Hadoop伪分布式环境搭建
- Springmvc框架本地化和国际化
- AC自动机原理说明
- 破解IntelliJ Idea 15 方式
- Hadoop之--集群环境搭建
- Java NIO FileChannel
- Hadoop 学习第一步 ,Hadoop环境搭建
- 超时函数原理及程序
- Json反序列化之ObjectMapper(自定义实现反序列化方法)
- mysql-connector-java.jar包和源代码下载地址
- Python2.X无换行无空格输出
- eclipse安装extjs插件
- JavaScript 中的 prototype
- 什么是API
- 编程之久除了算法和数据结构,什么也不属于我们。