hadoop 1.2.1 安装步骤 伪分布式
来源:互联网 发布:sql 字段中包含字符 编辑:程序博客网 时间:2024/06/05 04:58
最近在系统的学习hadoop
课程第一步是安装hadoop1.x,具体安装步骤如下:
一、系统安装
本文使用centos6.5安装,具体安装步骤省略
二、jdk安装
下载jdk1.7.0_51解压,在环境中
设置环境变量:
vi /etc/profile,添加如下行:
export JAVA_HOME=/usr/local/jdk1.7.0_51
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin
由于在centos下安装,选择需要设置jdk版本
update-alternatives --install /usr/bin/java java /export/home/es/jdk1.7.0_51/bin/java 60
update-alternatives --config java
三、linux基本参数设置
设置防火墙:
vi /etc/selinux/config
将红框标示部分,设置为disabled
查看防火墙情况,并关闭
service iptables statusservice ip6tables statusservice iptables stopservice ip6tables stopchkconfig iptables offchkconfig ip6tables off四,免密码登陆
设置使用免密码登陆方式
vi /etc/ssh/sshd_configRSAAuthentication yesPubkeyAuthentication yesAuthorizedKeysFile .ssh/authorized_keys将这三个部分的注释去掉,使用RSA验证方式
生成公钥
[hadoop@vm .ssh]$ pwd/export/home/hadoop/.ssh[hadoop@vm .ssh]$ ssh-keygen -t rsaGenerating public/private rsa key pair.......[hadoop@vm .ssh]$ cp id_rsa.pub authorized_keys[hadoop@vm .ssh]$ lsauthorized_keys id_rsa id_rsa.pub修改hosts文件:
[hadoop@vm conf]$ more /etc/hosts127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4::1 localhost localhost.localdomain localhost6 localhost6.localdomain6<span>192.168.2.201 vm.master192.168.2.202 vm.slave1192.168.2.203 vm.slave2</span>修改hostname
[hadoop@vm etc]$ vi /etc/sysconfig/networkNETWORKING=yesHOSTNAME=vm.master四,修改hadoop配置文件
[hadoop@vm conf]$ pwd
/export/home/hadoop/hadoop-1.2.1/conf
修改core-site.xml
[hadoop@vm conf]$ vi core-site.xml <?xml version="1.0"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!-- Put site-specific property overrides in this file. --><configuration><property><name>fs.default.name</name><value>hdfs://localhost:9000</value></property></configuration>修改hdfs-site.xml
[hadoop@vm conf]$ vi hdfs-site.xml <?xml version="1.0"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!-- Put site-specific property overrides in this file. --><configuration><property><name>dfs.replications</name><value>1</value></property></configuration>修改mapred-site.xml
[hadoop@vm conf]$ vi mapred-site.xml <?xml version="1.0"?><?xml-stylesheet type="text/xsl" href="configuration.xsl"?><!-- Put site-specific property overrides in this file. --><configuration><property><name>mapred.job.tracker</name><value>localhost:9001</value></property></configuration>设置JAVA_HOME
五,尝试启动
format namenode
尝试启动
搭建完毕
搭建完毕
0 0
- hadoop 1.2.1 安装步骤 伪分布式
- Hadoop伪分布式安装步骤
- hadoop伪分布式安装步骤
- hadoop伪分布式安装步骤
- hadoop伪分布式安装步骤
- hadoop伪分布式安装步骤
- CentOS hadoop 伪分布式安装步骤
- Hadoop伪分布式模式安装配置步骤
- hadoop-1.2.1伪分布式安装
- [hadoop]hadoop-1.2.1伪分布式安装教程(二)
- hadoop 伪分布式学习步骤
- 伪分布式hadoop搭建步骤
- Hadoop 伪分布式安装
- hadoop 伪分布式安装
- Hadoop 伪分布式安装
- HADOOP伪分布式安装
- hadoop伪分布式安装
- Hadoop伪分布式安装
- EL表达式处理转义符
- 记一次 java程序优化
- NSDictionary的基本操作
- heritrix 3.2.0 -- 环境搭建
- 手动安装Windows服务
- hadoop 1.2.1 安装步骤 伪分布式
- C++中的类静态成员及静态成员函数
- Java 运行时监控,第 1 部分: Java 系统运行时性能和可用性监控
- ORACLE+SQL性能优化
- Secure Network (ssh端口映射)-----图详细可以使用
- Java Code Review清单 代码编写规范性
- 【SQL-码农】SQL Server 2008中SQL增强之二:Top新用途
- (待整理)B - Cube Stacking(8.2.2)
- 系统备份、恢复、还原