hadoop之旅(一)环境搭建

来源:互联网 发布:神华低碳研究所 知乎 编辑:程序博客网 时间:2024/06/05 14:44

前面我们已经搭建好Hadoop,hdfs,一台master两台slaves。
1。hadoop-daemon.sh start/stop namenode/datanode启动/关闭hdfs
2。hdfs dfsadmin -report|more 查看集群情况
3.start-dfs 直接在master启动集群
4.ssh’免密码登录ssh_keygen -t rsa ,生成一个私钥一个公钥文件,把公钥拷贝到slaves。ssh-copy-id master /slave1/slave2
5.start-dfs 直接在master启动集群
6.修改hdfs-site.xml, 增加property dfs.replication 修改默认备份数
7.core-site.xml

fs.defaultFS
hdfs://master:9000

配置master
hadoop.tmp.dir
/var/hadoop
默认存在tmp下容易出问题就修改

原创粉丝点击