MRUnit测试map/reduce
来源:互联网 发布:百度云加速 seo 编辑:程序博客网 时间:2024/05/17 22:07
Mrunit是一种对mapreduce进行单元测试的工具,其特点是不需要启动集群。
首先利用maven先加上一来,我们用的是hadoop2.7.3。
org.apache.mrunit
mrunit
1.1.0
hadoop2
如果不能下载的话,建议去官网下载源码,然后进行编译。地址:
http://archive.apache.org/dist/mrunit/mrunit-1.1.0/
在test/java下面,新建class.
如果程序根据我们输入的参数,进行map/reduce计算后,和我们理想的输出结果相同,那么测试通过,否则就失败,这个时候就可以去debug找问题了。这个工具让我们对map/reduce的基本逻辑能进行一个测试,不然每次提交到集群上面去运行,不太利于debug!
阅读全文
0 0
- MRUnit测试map/reduce
- mrunit测试
- MRUnit测试
- MapReduce程序的测试--MRUnit
- MapReduce单元测试(MRUnit测试)
- mrunit
- MRUnit
- map/reduce
- map reduce
- Map/Reduce
- map reduce
- Map Reduce
- map reduce
- map-reduce
- Map-Reduce
- Map Reduce
- Map Reduce
- Map/Reduce
- C# 在word文档指定位置插入图片
- QT 实现无边框拖动
- Eclipse快捷键整理
- 前端一些棘手的问题
- 开门第一篇
- MRUnit测试map/reduce
- hpuoj 【1112】合并数字【水题】
- 如何修改request的parameter
- js合并两个json对象
- UVA10587 Mayor's posters
- vlc-for-android
- sqlserver将查询的单列结果集拼成一行字符串用逗号分隔
- [Python]编码声明:是coding:utf-8还是coding=urf-8呢
- 网络流