elasticsearch2.1 elasticsearch-hadoop安装

1、下载elasticsearch-hadoop-2.2.0beta1.jar，拷贝到hive的lib目录中，然后以如下方式打开hive命令窗口：

bin/hive -hiveconf hive.aux.jars.path=/root/hive/lib/elasticsearch-hadoop-2.2.0beta1.jar

这个也可以写在hive的配置文件中，

<property>

        <name>hive.aux.jars.path</name>

        <value>hdfs://ns/path/elasticsearch-hadoop.jar</value>

       <description>A comma separated list (with no spaces) of the jar files</description>

</property>

2、创建表

CREATE TABLE es(location STRING, url STRING) 

STORED BY 'org.elasticsearch.hadoop.hive.EsStorageHandler' 

TBLPROPERTIES('es.resource' = 'test/share',

'es.index.auto.create' = 'true','es.nodes'='customercenter1,customercenter2,customercenter3,customercenter4','es.port'='9200');

由于在Elasticsearch for hive搭建时，Elasticsearch使用的是官方最新版本，而Elasticsearch for hadoop的插件包版本更新不及时,导致在环境搭建的时候出现了问题

 Elasticsearch for Apache Hadoop 2.1.0版本及前版本不支持最新的Elasticsearch2.1.0导致遇到兼容性问题如下：

而Elasticsearch for Apache Hadoop2.1.1版本开始做了版本限制,详情如下：

Elasticsearch for Apache Hadoop2.2.0beta1开始对Elasticsearch2.x版本做了兼容

在使用Elasticsearch for Apache Hadoop2.2.0beta1过程中一直遇到以下问题：

经过修改源码打印日志发现是rest API返回结果变了

Elasticsearch1.7的/_nodes/transport rest API返回结果

Elasticsearch2.1的/_nodes/transport rest API返回结果

现已修改解析http_address部分源代码StringUtils.java：