Hadoop伪分布式集群部署
来源:互联网 发布:webservice 返回json 编辑:程序博客网 时间:2024/05/21 11:07
1、下载Hadoop安装包hadoop-2.7.0.tar.gz
2、用命令进入放置目录,解压,tar xzvf hadoop-2.7.0.tar.gz
解压会打印出明细信息,中间信息略.......
解压完成
3、配置hadoop环境变量/myFile/04.BigData/hadoop-2.7.0/etc/hadoop/hadoop-env.sh
export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.8.0_111.jdk/Contents/Home
export HADOOP_PREFIX=/myFile/04.BigData/hadoop-2.7.0
4、修改配置文件
/myFile/04.BigData/hadoop-2.7.0/etc/hadoop/core-site.xml
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
/myFile/04.BigData/hadoop-2.7.0/etc/hadoop/hdfs-site.xml
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
没有mapred-site.xml文件,我们拷贝一份mapred-site.xml.template
/myFile/04.BigData/hadoop-2.7.0/etc/hadoop/mapred-site.xml
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
5、修改系统环境变量,保证OS、java、hadoop都是32位或者都是64位。
修改配置文件
执行source命令使配置生效
zhaojunyandeMacBook-Pro:~ zhaojunyan$ source /etc/profile
6、运行sbin/start-all.sh,查看进程
zhaojunyandeMacBook-Pro:~ zhaojunyan$ jps
55905 NameNode
68864 NodeManager
68786 ResourceManager
49829 DataNode
49919 SecondaryNameNode
76830 Jps
zhaojunyandeMacBook-Pro:~ zhaojunyan$
阅读全文
0 0
- Hadoop伪分布式集群部署
- hadoop伪分布式集群部署注意事项
- Hadoop伪分布式部署和集群搭建
- 部署一个伪分布式的Hadoop集群
- hadoop伪分布式部署
- hadoop伪分布式部署
- hadoop伪分布式部署
- Hadoop集群安装部署---单节点伪分布式
- hadoop分布式集群部署
- 搭建伪分布式Hadoop集群
- hadoop集群搭建【伪分布式】
- 搭建Hadoop伪分布式集群
- 搭建伪分布式hadoop集群
- Hadoop伪分布式集群搭建
- Hadoop集群伪分布式搭建
- 搭建伪分布式hadoop集群
- hadoop伪分布式集群搭建
- Hadoop伪分布式集群搭建
- SpringMvc 配置文件
- React Native探索(四)Flexbox布局详解
- php面试,
- Java协变返回类型
- 安卓几种图片加载框架的比较
- Hadoop伪分布式集群部署
- Java 编程题目 第二十一题
- (141)间接光照缓存
- 318. Maximum Product of Word Lengths
- ubuntu下boot空间不足解决方法(卸载旧内核)
- bzoj1924 [Sdoi2010]所驼门王的宝藏
- 调试显示线程名称
- 字符串的输入
- 重建二叉树