Hive-0.11.0 安装配置过程(MySQL存储meta data)
来源:互联网 发布:淘宝达人跟达人一起淘 编辑:程序博客网 时间:2024/06/09 07:50
1 、下载Hive-0.11.0
http://apache.cs.utah.edu/hive/hive-0.11.0/
2、解压安装
Hive原则上可以安装在集群上的任何一台机器上面,但是考虑到 master节点的负荷比较大,我们选择一台机器性能较好的datanode来安装hive。在我们的集群中选择cloud003来安装hive。另外,在我们的安装中采用 mySQL来存放hive的meta数据。
2.1 解压
将hive-0.11.0.tar.gz解压到/home/hduser路径下
tar –zxvf hive-0.11.0.tar.gz
产生hive 的安装目录:/home/hduser/hive-0.11.0
如果所有配置都采用默认情况,此时hive已经可用。这里有一个问题需要注意的是,hadoop的安装路径要添加到/etc/profile,否则 hive运行时将找不到hadoop。(此时可跳过第2.2步骤,测试hive是否正常运行)
2.2配置 mySQL存放metadata (可选)
1) 这里默认mySQL已经安装(root/mysql)。由于 mysql的默认安装只允许本地登录,所以需要修改配置文件将地址绑定注释掉:
2)重启mysql: sudoservice mysql restart
3)登录msql,创建database: hive
4)修改hive配置文件hive-site.xml
默认这个文件是不存在的,进入hive安装路径(/home/hduser/hive-0.11.0/)在conf目录下,拷贝hive-default.xml.template得到hive-site.xml文件
修改以下属性:
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://16.187.94.183:3306/hive?characterEncoding=UTF-8</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>mysql</value>
</property>
</configuration>
5)把mySQL的JDBC驱动包复制到Hive的lib目录下
这里下载的版本是:mysql-connector-java-5.0.8-bin.jar
3、启动运行
3.1 配置环境变量
vim /etc/profile
添加hive环境变量:
export HIVE_HOME=/home/hduser/hive-0.11.0
export PATH=$HIVE_HOME/bin:$PATH
source /etc/profile
3.2 启动hive
在终端直接输入:hive即可,如下图:
3.3 验证hive
1)在hive上建立数据表
Hive>create table test(id int,name string) row formatdelimited fields terminated by ’\t’;
2)登录mySQL查看meta信息
use hive;
show tables;(如下图)
select* from TBLS;
至此hive配置安装成功!
- Hive-0.11.0 安装配置过程(MySQL存储meta data)
- hive安装、配置 mysql存储元数据
- Hive安装过程(mysql/oracle存储元数据)
- hive&mysql安装配置
- Hive安装配置过程中mysql的用户创建
- Inspecting mysql meta data
- Mybatics3.0设置mysql存储过程配置
- hive与mysql安装配置
- hive安装及mysql配置
- hive安装过程:metastore(元数据存储)的三种方式之本地mysql方式
- hive安装过程:metastore(元数据存储)的三种方式之远端mysql方式
- hive元数据存储使用mysql配置
- hive存储元数据在mysql配置
- Hive存储过程HQL/SQL(二)– 在Hive存储过程中读写MySQL表
- MySQL安装配置过程
- 用meta-data配置参数
- 用meta-data配置参数
- 用meta-data配置参数
- windows编译文件参数含义
- Linux 下如何使用CMakel
- 南京IT公司总结
- mysql on duplicate key update 的使用
- 常用查询语句
- Hive-0.11.0 安装配置过程(MySQL存储meta data)
- 第七章
- 统计阶乘中质因子的个数
- 如何在IIS中启用GZIP压缩
- struts2注解
- 黑马程序员_<<TCP>>
- EXT4.2下 求grid里列的和
- PHP中的单例模式
- mvn 编译错误java.lang.NoSuchMethodError: org.objectweb.asm.ClassWriter. <init>(Z)V