hadoop之单机模式
来源:互联网 发布:linux查看ssh是否开启 编辑:程序博客网 时间:2024/04/30 07:45
先介绍下hadoop有3种搭建模式
- 单机模式
- 伪分布式模式
- 完全分布式模式
现在做个简单的单机模式搭建,单机模式的搭建,主要用于调试方便吧。
首先需要配置JAVA_HOME
下载JDK1.7以上。
/etc/profile中加上export JAVA_HOME=xxx
可以下载hadoop了,执行
wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.0/hadoop-2.7.0.tar.gztar xvf hadoop-2.7.0.tar.gz这里需要注意也许经常解压缩失败,检查是否下载完整。
也有可能有些国内镜像编码问题?我从windows下载传上去基本就没问题。或许设置wget 远程 本地编码也能解决问题。
如果是root安装,需要执行
useradd hadoop--文件移入/home/hadoop下后chown -R hadoop:hadoop /home/hadoop/
以后用hadoop用户操作hadoop应该是比较好,或者流行的方式。
现在其实单机模式已经搭建OK了。你需要做的就是测试。
mkdir ~/inputcp ~/hadoop-2.7.0/etc/hadoop/*.xml ~/input/~/hadoop-2.7.0/bin/hadoop jar ~/hadoop-2.7.0/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.0.jar grep ~/input/ ~/output/ 'dfs[a-z.]+'cat ~/output/
如果你做产生了错误,也许你擅自创建了一个output文件夹。也就是说output已经存在了。
0 0
- hadoop之单机模式
- hadoop之单机模式
- Hadoop配置之单机模式
- Hadoop 运行模式之单机模式
- hadoop实战之安装与单机模式
- 在ubuntu部署hadoop之单机模式
- 【Hadoop基础教程】2、Hadoop之单机模式搭建
- Hadoop入门基础教程 Hadoop之单机模式搭建
- Hadoop单机模式测试
- Hadoop单机模式
- hadoop单机模式配置
- Hadoop单机模式部署
- hadoop单机模式安装
- Hadoop单机模式安装
- Hadoop单机模式安装
- hadoop 单机模式
- Hadoop单机模式搭建
- Hadoop单机本地模式
- 随笔
- 全局获取Context的技巧
- tp处理vender文件后缀不是php的情况
- sqlite遇到database is locked问题的完美解决
- 实验:网络常见的9个命令
- hadoop之单机模式
- scala书写规范1
- iOS事件全面解析 (触摸事件、手势识别、摇晃事件、耳机线控)
- iPhone手机 手机设备号和手机串号imsi
- Java根据生日得出是十二星座的哪一个星座
- Win7 64bit hadoop-2.6.0源码编译部署包
- 【CodeChef PRIMEDST】Prime Distance On Tree
- Android增量式升级程序
- php curl常见错误:SSL错误、bool(false)