Hadoop 的 KeyFieldBasedComparator

来源:互联网 发布:centos nginx 配置 编辑:程序博客网 时间:2024/06/07 11:54

Hadoop的KeyFieldBasedComparator主要使用在基于对Key的比较和分区,但是经过一段时间以来的使用,发现好像问题挺多,而且经常是数组越界的问题。而且他的异常抛出情况不太稳定,会跟问题的量级相关,所以,现在我都是尽量不使用该类,而是使用自定义的Comparator和Partitioner。

原创粉丝点击