Hadoop集群环境测试-WordCount.java-下篇

来源:互联网 发布:dnf用tgp网络连接中断 编辑:程序博客网 时间:2024/05/22 09:00

二. 验证hadoopmap-reduce功能是否正常

       Map-reduce主要实现作业的处理。通过执行一个map-reduce程序,分析结果是否正确。本文通过hadoop自带的统计单词的WordCount.java进行测试。

1、执行后,正确页面。

该步若出现如下错误:

则修改salve结点的hosts文件。

       执行完毕后,再次查看hdfs系统。此时,生成了output。

查看output中的内容:

out目录中主要有两项内容,其中一个是目录,主要存放一些过程的日志信息,另一个是文件,用于存放map-reduce的执行结果。查看map-reduce的执行结果,如下:

上述统计结果正确,说明map-reduce的功能是正确的。

原创粉丝点击