Hive-0.12.0配置安装
来源:互联网 发布:java工厂模式的好处 编辑:程序博客网 时间:2024/05/21 05:41
Hive安装及配置,准备工作:
1).安装JDK
2).安装Hadoop
3).安装MySQL
上面都安装好后,接下来就可以安装Hive了,具体步骤如下:
(1)下载并安装hive
[hadoop@master ~]$ tar -xzvf hive-0.12.0.tar.gz[hadoop@master ~]$ cd hive-0.12.0/[hadoop@master hive-0.12.0]$ pwd/home/hadoop/hive-0.12.0 #修改/etc/profile 添加HIVE_HOME环境变量,并将Hive的bin添加到PATH中[hadoop@master hive-0.12.0]$ sudo vim /etc/profile#在最后追加:#hive-0.12.0export HIVE_HOME=/home/hadoop/hive-0.12.0export PATH=${PATH}:${HIVE_HOME}/bin#编辑完之后到shell下执行:[hadoop@master hive-0.12.0]$ source /etc/profile
将conf文件夹下的配置文件拷贝重名名,如下所示:
[root@hadoop1 hive-0.8.1]# cd conf/[root@hadoop1 conf]# cp hive-env.sh.template hive-env.sh[root@hadoop1 conf]# cp hive-default.xml.template hive-site.xml修改hive-env.sh文件,指定HADOOP_HOME及HIVE_CONF_DIR的路径如下:
HADOOP_HOME=/root/hadoopfile/hadoop
export HIVE_CONF_DIR=/root/hadoopfile/hive/conf
(2) 对hive进行配置
详细的配置信息可以阅读官方文档关于Mysql-Metastore有关Remote Metastore的介绍
官方地址:https://cwiki.apache.org/confluence/display/Hive/AdminManual+MetastoreAdmin
其中有关Remote Metastore的Server端配置说明如下:
编辑hive-site.xml
找到:javax.jdo.option.ConnectionURL和javax.jdo.option.ConnectionDriverName,修改为:
<property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://localhost/hive?createDatabaseIfNotExist=true</value> <description>JDBC connect string for a JDBC metastore</description></property><property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.jdbc.Driver</value> <description>Driver class name for a JDBC metastore</description></property>找到:javax.jdo.option.ConnectionUserName和javax.jdo.option.ConnectionPassword,修改为:
<property> <name>javax.jdo.option.ConnectionUserName</name> <value>root</value> <description>username to use against metastore database</description></property><property> <name>javax.jdo.option.ConnectionPassword</name> <value>a123456</value> <description>password to use against metastore database</description></property>
将准备好的mysql-jdbc的jar, copy到$HIVE_HOME/lib下:
[hadoop@master]$ cp mysql-connector-java-5.1.9.jar /root/hadoopfile/hive/lib/
查看Hive的日志,默认的位于/tmp/${username}/hive.log, 在hive-site.xml中配置。
回头查看Remote Metastore文档下面有:
我们回头编辑hive-site.xml文件找到hive.metastore.schema.verification的配置,并将其设置成false。(注意:改参数在生成metastore时会用到)
<property> <name>hive.metastore.schema.verification</name> <value>false</value> <description> Enforce metastore schema version consistency. True: Verify that version information stored in metastore matches with one from Hive jars. Also disable automatic schema migration attempt. Users are required to manully migrate schema after Hive upgrade which ensures proper metastore schema migration. (Default) False: Warn if the version information stored in metastore doesn't match with one from in Hive jars. </description></property>
配置完成。
5. 启动hive shell环境,执行show databases 则代表已经成功生成metastore。
进入mysql环境,查看hive元数据。
- Hive-0.12.0配置安装
- Hive 0.12.0安装配置
- hive 0.12 安装配置
- hive-0.12.0安装与配置
- Hive 1.1.0 集群安装配置
- hive安装与配置
- hive安装配置
- Hive安装配置详细
- pig hive 安装配置
- Hadoop&hive安装配置
- Hive安装配置
- Hive安装配置
- hive 安装与配置
- hive安装及配置
- Hive 安装及配置
- hive集群安装配置
- Hive安装配置笔记
- hive 安装配置
- 各种素材集中
- hadoop基础:Java中的Hash值介绍
- (转载)函数指针及函数指针数组的妙用
- UML九种图之部署图和构件图
- 函数指针数组的定义
- Hive-0.12.0配置安装
- 言语的暴力胜过一切枪支弹药
- javascript settimeout setinterval Javascript高性能动画与页面渲染
- 如何让Office2003和Office2010共存
- zpool iostat <pool> 1 100的可信赖性
- mapreduce不同类型的数据分到同一个分区是否会影响输出结果
- 如何利用git制作和提交patch
- win7-64位系统用QSettings写注册表
- “当前不会命中断点。源代码与原始版本不同”的问题的有效解决办法