Hive-0.12.0配置安装

来源:互联网 发布:java工厂模式的好处 编辑:程序博客网 时间:2024/05/21 05:41

Hive安装及配置,准备工作:

1).安装JDK

2).安装Hadoop

3).安装MySQL

上面都安装好后,接下来就可以安装Hive了,具体步骤如下:

(1)下载并安装hive

[hadoop@master ~]$ tar -xzvf hive-0.12.0.tar.gz[hadoop@master ~]$ cd hive-0.12.0/[hadoop@master hive-0.12.0]$ pwd/home/hadoop/hive-0.12.0  #修改/etc/profile 添加HIVE_HOME环境变量,并将Hive的bin添加到PATH中[hadoop@master hive-0.12.0]$ sudo vim /etc/profile#在最后追加:#hive-0.12.0export HIVE_HOME=/home/hadoop/hive-0.12.0export PATH=${PATH}:${HIVE_HOME}/bin#编辑完之后到shell下执行:[hadoop@master hive-0.12.0]$ source /etc/profile

 将conf文件夹下的配置文件拷贝重名名,如下所示:

[root@hadoop1 hive-0.8.1]# cd conf/[root@hadoop1 conf]# cp hive-env.sh.template hive-env.sh[root@hadoop1 conf]# cp hive-default.xml.template hive-site.xml
修改hive-env.sh文件,指定HADOOP_HOME及HIVE_CONF_DIR的路径如下: 
HADOOP_HOME=/root/hadoopfile/hadoop 
export HIVE_CONF_DIR=/root/hadoopfile/hive/conf

(2) 对hive进行配置

      详细的配置信息可以阅读官方文档关于Mysql-Metastore有关Remote Metastore的介绍

  官方地址:https://cwiki.apache.org/confluence/display/Hive/AdminManual+MetastoreAdmin

      其中有关Remote Metastore的Server端配置说明如下:

编辑hive-site.xml

  找到:javax.jdo.option.ConnectionURLjavax.jdo.option.ConnectionDriverName,修改为:

<property>  <name>javax.jdo.option.ConnectionURL</name>  <value>jdbc:mysql://localhost/hive?createDatabaseIfNotExist=true</value>  <description>JDBC connect string for a JDBC metastore</description></property><property>  <name>javax.jdo.option.ConnectionDriverName</name>  <value>com.mysql.jdbc.Driver</value>  <description>Driver class name for a JDBC metastore</description></property>
找到:javax.jdo.option.ConnectionUserNamejavax.jdo.option.ConnectionPassword,修改为:

<property>  <name>javax.jdo.option.ConnectionUserName</name>  <value>root</value>  <description>username to use against metastore database</description></property><property>  <name>javax.jdo.option.ConnectionPassword</name>  <value>a123456</value>  <description>password to use against metastore database</description></property>

将准备好的mysql-jdbc的jar, copy到$HIVE_HOME/lib下:

[hadoop@master]$ cp mysql-connector-java-5.1.9.jar /root/hadoopfile/hive/lib/
仅仅设置完后,仍然报错:


查看Hive的日志,默认的位于/tmp/${username}/hive.log, 在hive-site.xml中配置。


回头查看Remote Metastore文档下面有:


我们回头编辑hive-site.xml文件找到hive.metastore.schema.verification的配置,并将其设置成false。(注意:改参数在生成metastore时会用到)

<property>  <name>hive.metastore.schema.verification</name>  <value>false</value>   <description>   Enforce metastore schema version consistency.   True: Verify that version information stored in metastore matches with one from Hive jars.  Also disable automatic         schema migration attempt. Users are required to manully migrate schema after Hive upgrade which ensures         proper metastore schema migration. (Default)   False: Warn if the version information stored in metastore doesn't match with one from in Hive jars.   </description></property>

配置完成。

  5.  启动hive shell环境,执行show databases 则代表已经成功生成metastore。


进入mysql环境,查看hive元数据。


0 0
原创粉丝点击