Gnuplot图形展示hadoop处理结果

一直苦恼于如何将hadoop处理的结果进行显示，有一些商业图形软件和大数据可以很好的集成如Intellicus，功能很完善图形显示也很漂亮但是目前阶段过于繁琐，而且还是收费的。还有一种是Eclipse的BIRT插件，这个工具比较好用，比较适合正式的项目开发应用。后来偶尔发现一个很好用的小工具Gnuplot,可以在window, linux各种平台上运行的，主要是应用在数学计算中的的画各种函数曲线，于是乎就打算用它作为目前的数据展示。

Gnuplot 是一种免费分发的绘图工具，可以移植到各种主流平台。它可以下列两种模式之一进行操作：当需要调整和修饰图表使其正常显示时，通过在 gnuplot 提示符中发出命令，可以在交互模式下操作该工具。或者，gnuplot 可以从文件中读取命令，以批处理模式生成图表。例如，如果您正在运行一系列的实验，需要每次运行后都查看结果图表；或者当您在图表最初生成很久以后需要返回图表修改某些内容时，批处理模式能力会特别有用。当在 WYSIWIG 编辑器中很难捕获用于修饰图表的鼠标单击事件时，您可以很容易地将 gnuplot 命令保存在文件中，六个月后将其加载到交互式会话中重新执行。

安装：

http://www.gnuplot.info/download.html

运行实例：

之前有运行过MapReduce的job求1993年到2013年之间每年的平均温度，最高温度和最低温度。在3个节点上处理1.2G的数据量总时间是6分钟。本实例没必要用那么都的数据，于是选择2012年的部分气象数据92MB，求每个月的平均温度，最高温度和最低温度。

这里贴上Reduce的代码，其他的Map和Driver类和之前的基本差不多。

@Override
public void reduce(Text key, Iterable<IntWritable> values, Context context) throws IOException, InterruptedException{
long totalNum = 0;
long totalValue = 0;
long maxTemp = Long.MIN_VALUE;
long minTemp = Long.MAX_VALUE;
long avgTemp = 0;

for(IntWritable value: values){
long temperature = value.get();
totalNum ++;
totalValue += temperature;

if(temperature > maxTemp){
maxTemp = temperature;
}

if(temperature < minTemp){
minTemp = temperature;
}

}
avgTemp = totalValue/totalNum;
double avg = (double)avgTemp/(double)10;
double max = (double)maxTemp/(double)10;
double min = (double)minTemp/(double)10;

 context.write(key, new Text(String.valueOf(avg) + "\t" +  String.valueOf(max) + "\t" + String.valueOf(min)));
}

2012年的平均温度，最高温度，最低温度：

201201-0.224.7-21.0
201202-0.926.1-34.0
2012035.630.3-18.0
2012045.932.0-19.0
20120511.435.6-5.0
20120614.339.4-2.3
20120717.340.00.0
20120815.836.7-18.3
20120912.035.0-18.0
2012106.830.0-14.0
2012114.630.0-11.0
201212-1.626.0-29.2

输入Gnuplot 脚本来画出2012年每个月份的平均温度，最高温度，和最低温度三条曲线图

gnuplot> set xlabel "Month"
gnuplot> set ylabel "Temperature"
gnuplot> set title "Year(2012) Monthly Temperature"
gnuplot> set xrange[201201:201212]
gnuplot> set xtics 201201,1,201212
gnuplot> plot "temperature.dat" using 1:2 w lp pt 5 title "Avg Temperature", "temperature.dat" using 1:3 w lp pt 6 title "Max Temperature", "temperature.dat" using 1:4 w lp pt 7 title "Min Temperature"

 

画出来的图形曲线如下：

 

参考资料：

http://www.gnuplot.info/  （Gnuplot官网）

http://www.ibm.com/developerworks/cn/linux/l-gnuplot/ （IBM developer works关于gnuplot的一篇）