hadoop之虚拟机安装hadoop
来源:互联网 发布:手机数据恢复哪个好 编辑:程序博客网 时间:2024/05/16 04:53
我使用的是W7系统,要安装Hadoop;但是想在Linux下运行Hadoop,一个非常好的选择是虚拟机;我使用的是Vmware和Ubuntu server 14;
1、下载Hadoop;
进入官网下载:http://hadoop.apache.org/releases.html 按需下载版本:我下载了2.7.3版本
2、制作成ISO 文件,挂载
设置虚拟机光盘位置:
在虚拟机上输入挂载命令,解压
bin:Hadoop最基本的管理脚本和使用脚本的目录,这些脚本是sbin目录下管理脚本的基础实现,用户可以直接使用这些脚本管理和使用Hadoop。
etc:Hadoop配置文件所在的目录,包括core-site,xml、hdfs-site.xml、mapred-site.xml等从Hadoop1.0继承而来的配置文件和yarn-site.xml等Hadoop2.0新增的配置文件。
include:对外提供的编程库头文件(具体动态库和静态库在lib目录中),这些头文件均是用C++定义的,通常用于C++程序访问HDFS或者编写MapReduce程序。
lib:该目录包含了Hadoop对外提供的编程动态库和静态库,与include目录中的头文件结合使用。
libexec:各个服务对用的shell配置文件所在的目录,可用于配置日志输出、启动参数(比如JVM参数)等基本信息。
sbin:Hadoop管理脚本所在的目录,主要包含HDFS和YARN中各类服务的启动/关闭脚本。
share:Hadoop各个模块编译后的jar包所在的目录。
3、配置环境
计算机要找到命令,就必须把命令的路径告诉系统在哪里;hadoop 2.7.3的文件目录我搜索的目录有些不一样;
配置文件是在etc/hadoop下
拷贝文件hadoop-env.sh 文件到主目录下cp hadoop-env.sh ~
用vi打开文件
这个文件第一印象:变量配置文件;
看这句export JAVA_HOME=${JAVA_HOME} ;设置JAVA_HOME;我在安装系统时,选择了安装java;那么java是在/usr/bin目录下,并且默认是以设置在了环境变量中;
看到这个;我试试dadoop能不能直接使用java,;
结果发现是不行的;那么我的目录和平常安装的路径有些区别,那么JAVA_HOME该怎么设置呢?hadoop查找java路径应该是$JAVA_HOME\bin
JAVA_HOME=/usr 即可
把其他的变量配置完:
配置完成;
- hadoop之虚拟机安装hadoop
- hadoop安装之-hadoop
- centos虚拟机安装hadoop
- hadoop学习之hadoop安装
- Hadoop(一) 之 安装Hadoop
- Hadoop之Hadoop安装详解
- hadoop搭建之hadoop安装
- 安装配置Hadoop虚拟机集群
- mac 虚拟机安装 hadoop 2.7
- 虚拟机 ubuntu+离线安装hadoop
- hadoop系列之一虚拟机安装
- 虚拟机安装Hadoop环境-1
- Hadoop大象之旅001-安装VMware虚拟机
- 【Hadoop】1、Hadoop开山篇之虚拟机下ubuntu安装jdk1.7
- Hadoop之安装配置
- hadoop安装之-hive
- hadoop安装之-hbase
- hadoop安装之-sqoop
- dp斜率优化 Hdu 3507(Print Article)详细题解
- 接口总结
- javaSE_8系列博客——Java语言的特性(三)--类和对象(15)--嵌套类
- 第七周 CSS3选择符
- 累加器
- hadoop之虚拟机安装hadoop
- Swift-通过 Emoji 来理解 Swift 高阶函数
- GDAL+qwt直方图显示
- 在CentOS 6.6 64bit上升级GCC到4.8.2版本
- 实验楼linux学习笔记(二):用户及文件权限管理
- APICloud集成微信支付(wxPay第二种方案)
- 【一图看懂】计算机视觉识别简史:从 AlexNet、ResNet 到 Mask RCNN (很好的普及文章--转载)
- state.sls和state.highstate的区别
- 《web安全深度剖析》笔记五