运行hadoop中的实例wordcount及问题
来源:互联网 发布:python 迭代器的方法 编辑:程序博客网 时间:2024/06/06 00:10
1.准备数据
wc.txt wc2.txt
2.在hdfs中创建/wordcount/input文件夹
hdfs dfs -mkdir -p /wordcount/input
3.上传到hdfs文件系统中
hdfs dfs -put wc.txt wc2.txt /wordcount/input
4.进入apps/hadoop-2.6.4/share/hadoop/mapreduce目录
cd apps/hadoop-2.6.4/share/hadoop/mapreduce
5.运行实例wordcount
hadoop jar hadoop-mapreduce-examples-2.6.4.jar wordcount /wordcount/input /wordcount/output
注意:
运行wordcount实例代码时,显示
INFO ipc.Client: Retrying connect to server: node01/192.168.30.134:8032. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep(maxRetries=10, sleepTime=1000 MILLISECONDS)会重新连接服务器10次
原因:
没有启动yarn或者启动失败
解决:
启动yarn
start-yarn.sh
阅读全文
0 0
- 运行hadoop中的实例wordcount及问题
- hadoop wordcount运行实例
- hadoop-运行WordCount实例
- Hadoop 运行wordcount 实例
- hadoop运行wordcount实例
- hadoop下运行实例wordcount
- Windows下Cygwin环境的Hadoop安装(3)- 运行hadoop中的wordcount实例遇到的问题和解决方法
- Windows下Cygwin环境的Hadoop安装(3)- 运行hadoop中的wordcount实例遇到的问题和解决方法
- Windows下Cygwin环境的Hadoop安装(3)- 运行hadoop中的wordcount实例遇到的问题和解决方法
- 命令行运行hadoop实例wordcount程序
- hadoop伪分布式运行wordcount 实例Fedora14
- CentOS安装Hadoop并运行WordCount实例
- hadoop实例WordCount程序一步一步运行
- 命令行运行hadoop实例wordcount程序
- 关于运行hadoop的wordcount实例
- linux运行hadoop实例wordcount详解
- Hadoop实例WordCount程序一步一步运行
- hadoop开发:eclipse运行wordcount实例
- leetcode 82. Remove Duplicates from Sorted List II
- 句子逆序
- 请问在命令提示符上运行exe,怎么传入参数,是多个参数?求大神指导
- Scala结合HttpClient实现简单的爬虫
- java的堆,栈,静态代码区(常量区)
- 运行hadoop中的实例wordcount及问题
- Redux中间件对闭包的一个巧妙使用
- 全面理解Javascript的面向对象(一)
- 比特币源码解析(12)
- web学习笔记22-jQuery学习-2(post ajax)
- bzoj 1649: [Usaco2006 Dec]Cow Roller Coaster(DP)
- 新疆网赛h题
- 双系统win7+UBUNDTU
- 堆排序