Streming 模式解析Mapreduce使用简例
来源:互联网 发布:减肥不反弹知乎 编辑:程序博客网 时间:2024/06/08 05:52
stream_jar="/home/hadoop/hadoop-0.20.2/contrib/streaming/hadoop-0.20.2-streaming.jar";
hadoop jar ${stream_jar} \
-D hadoop.job.ugi="admin" \
-D mapred.job.name="job_test_desc_ \
-D mapred.reduce.tasks="0" \
-D mapred.output.compress="true" \
-D mapred.output.compression.codec="org.apache.hadoop.io.compress.GzipCodec" \
-input ${input} \
-output ${output} \
-mapper ./mapper.sh \
-file ./mapper.sh \
-file mapper程序的本地目录
maper.sh
sed 's/\t/#/g'
- Streming 模式解析Mapreduce使用简例
- MapReduce常见设计模式解析
- MapReduce过程详细解析和使用
- MapReduce模式MapReduce patterns
- MapReduce模式
- MapReduce 模式、算法和用例
- MapReduce 模式、算法和用例
- MapReduce 模式、算法和用例
- MapReduce 模式、算法和用例
- MapReduce的模式、算法和用例
- MapReduce 模式、算法和用例
- MapReduce的模式、算法和用例
- MapReduce 模式、算法和用例
- MapReduce的模式、算法和用例
- MapReduce的模式、算法和用例
- MapReduce的模式、算法和用例
- MapReduce的模式、算法和用例
- MapReduce 模式、算法和用例
- NPOI 读写Excel、WORD 免安装Office
- 二叉查找树(BST)及其C语言实现
- 数据库连接问题
- ajax提交,解决有时会重复提交问题
- SpingMVC+Mybatis+Mysql中文乱码
- Streming 模式解析Mapreduce使用简例
- Windows内存管理(1)--分配内核内存 和 使用链表
- 关于 第三章data member的绑定 的读书笔记
- 跟Google学习Android开发-起始篇-保存数据(2)
- 标准体重计算器
- Cocos2d-x在win32,android和IOS下的文件读写问题
- Delphi的消息机制探索
- oracle分页查询数据重复问题、分页排序陷阱
- android 计时器 Timer