linux安装hadoop教程
来源:互联网 发布:自由行 软件 编辑:程序博客网 时间:2024/06/11 21:31
一 安装jdk,配置jdk环境变量
1、下载linux版本jdk
2、vim 打开/etc/profile,加入以下配置
输入命令:vim /ect/profile,然后按 i 进行编辑模式输入以下内容
export JAVA_HOME=<java安装目录>
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
3、输入 source /etc/profile 命令,让配置立即生效
二 安装hadoop
1、下载hadoop,解压缩 tar -zxvf <包名>
2、切换到conf目录下,修改一下四个配置文件配置文件
1、hadoop-env.sh
export JAVA_HOME=该为自己java的路径
2、core-site.xml
配置三个属性:
//hadoop的工作目录 ,在/hadoop下面
<property>
<name>hadoop.tmp.dir</name>
<value>/hadoop</value>
</property>
//表示文件系统NameNode该如何访问
<property>
<name>fs.default.name</name>
<value>hdfs:imooc:9000</value>
</property>
//访问的hadoop的端口
<property>
<name>dfs.name.dir</name>
<value>/hadoop/name</value>
</property>
3、hdfs-site.xml
配置一个属性:
//数据的存放目录
<property>
<name>dfs.data.dir</name>
<value>/hadoop/data</value>
</property>
4、mapred-site.xml
配置一个属性:
//
<property>
<name>mapred.job.tracker</name>
<value>imooc:9001</value>
</property>
3、配置hadoop的安装路径
1、打开etc/profile进行编辑,添加export HADOOP_HOME=<hadoop安装路径>
2、在PATH里加入HADOOP_HOME
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$HADOOP_HOME/bin:$PATH
4、在hadoop目录的bin目录下对namenode进行格式化
hadoop namenode -format
5、启动hadoop
1、在bin目录下运行 start-all.sh
2、用jps命令查看进程
6、查看hadoop下面的文件
hadoop fs -ls
阅读全文
0 0
- linux安装hadoop教程
- 在Linux上安装hadoop教程
- Hadoop LZO 安装教程
- hadoop集群安装教程
- hadoop-lzo 安装教程
- hadoop集群安装教程
- HADOOP安装教程
- Hadoop 安装教程
- hadoop安装教程
- hadoop 安装教程
- hadoop安装教程
- hadoop安装教程
- Hadoop安装教程
- hadoop安装教程
- Hadoop 安装教程
- Hadoop安装教程
- hadoop集群安装教程
- Hadoop安装教程
- 利用jQuery中的bgstretcher插件制作幻灯片效果背景
- 第14周项目3
- 第十一周 项目三 “深度优先遍历”
- CentOS 6.8 数据库安装5.5.32
- SDNU__1280.求N进制的高精度加法
- linux安装hadoop教程
- 深入浅出Go常量
- Mysql查询每个月的最后一天
- 浮点数在内存中的存储,头文件,名大小写是否区分,unsigned int在实现两数相加时应注意什么
- LaTeX论文写作
- scikit-learn广义线性模型之岭回归
- 集合归类
- Java并发编程:线程池的使用
- 基于mac系统的 TensorFlow安装 以及 pycharm配置