Hadoop-1.0.4伪分布安装与配置
来源:互联网 发布:如何分析大数据 编辑:程序博客网 时间:2024/06/03 15:11
1、采用伪分布模式安装
将hadoop-****.tar.gz复制到linux的/usr/local目录下。
2、解压,重命名
#tar -xzvf hadoop-1.0.4.tar.gz
#mv hadoop-1.0.4 hadoop
3、配置环境变量
vi /etc/profile,在文件java_home后添加,export HADOOP_HOME=/usr/local/hadoop
在PATH后面添加:$HADOOP_HOME/bin
可以设置一个别名,从linux中快速进入到hadoop目录下:
alias chha='cd /usr/local/hadoop'
在命令中,输入chha就可以快速进入hadoop中。
在命令中,输入chha就可以快速进入hadoop中。
source /etc/profile
4、修改hadoop的配置文件,所有配置文件都在conf文件夹下
(1)hadoop-env.sh
修改第9行,去掉注释,exprto JAVA_HOME=/usr/local/jdk
(2)core-site.xml
(3)hdfs-site.xml
(4)
mapred-site.xml
5、hdfs是文件系统,第一次使用之前需要进行格式化,
$HADOOP_HOME/bin/hadoop namenode -format
6、启动hadoop程序,由于hadoop由hdfs文件系统,MapReduce两个部分组成,所以可以有三种启动方式
(1)全部启动,start-all.sh
全部关机,stop-all.sh
全部启动,用jps进行查看,有6项,缺一项即表示不成功
(2)分别启动HDFS和MapReduce
start-dfs.sh 启动HDFS
start-mapred.sh 启动MapReduce
(3)分别各个启动进程
hadoop-daemon.sh start namenode
hadoop-daemon.sh start datanode
hadoop-daemon.sh start secondarynamenode
hadoop-daemon.sh start jobtracker
hadoop-daemon.sh start tasktracker
若/etc/hosts中设置的名称hadoop0与core-site.xml和mapred-site.xml中的不同,启动不成功。如本例中,这两个文件中都是book0,应该改成hadoop0
7、可以运行hadoop中自带的example进行展示
0 0
- Hadoop-1.0.4伪分布安装与配置
- hadoop伪分布安装配置
- 在Ubuntu下安装与配置hadoop(伪分布)
- 在Ubuntu下安装与配置hadoop(伪分布)
- fedora18安装hadoop配置伪分布模式
- 安装配置Hadoop 2.3伪分布
- 安装并配置Hadoop伪分布模式
- 配置hadoop伪分布
- Hadoop伪分布配置
- hadoop 伪分布配置
- hadoop伪分布配置
- hadoop伪分布安装
- hadoop 伪分布安装
- hadoop伪分布安装
- hadoop伪分布安装
- Hadoop伪分布安装
- Hadoop的伪分布和完全分布安装配置过程
- Hadoop伪分布与全分布环境配置
- 系统运维哪些事儿之正常状态
- springAOP的注解
- Item 33:避免隐藏继承来的名称(继承与作用域嵌套) Effective C++笔记
- cocos2dx从其它Activity返回cocos界面出现黑块
- 转发分组
- Hadoop-1.0.4伪分布安装与配置
- 计算机网络面试常考
- python foreword
- c#MVC文件(图片,word,excel,zip等)批量上传
- armeabi,armeabi-v7a,x86,mips,arm64-v8a,mips64,x86_64下的so文件
- NGUI基本控件制作
- java 学习银行调度学习笔记
- 什么是seo
- Datatable导出到Execl中