RJDBC读取HIVE
来源:互联网 发布:ssi接口读取数据 编辑:程序博客网 时间:2024/05/15 00:05
这不是sc <- TranswarpR.init("kmeans", "GreedyHeterogeneousMode", "1", "0.2")sql<- "select p1,p2,p3 from powerloaddata.powerdata limit 10"sqlrdd<-txSql2RDD(sc,query=sql,minnum=100,sep=" ")txKmeans(sqlrdd, 4, iter.max =10, nstart = 1, sep=" ")
载入RJDBC,如果没安装请使用install.packages(‘RJDBC’)进行安装
require(RJDBC)
设置jdbc驱动
drv <- JDBC(‘org.apache.hadoop.hive.jdbc.HiveDriver’,
list.files(“/usr/lib/hive/lib/”, pattern = “jar$”, full.names=TRUE))
“hive-jdbc-0.12.0-transwarp.jar”)
通过驱动连接hive所在URL
conn <- dbConnect(drv, sprintf(‘jdbc:transwarp://%s:%s/powerloaddata’, ‘192.168.1.40’, ‘10000’))
执行一条查询语句,验证已连接成功
data <- dbGetQuery(conn,”select * from powerloaddata.powerdata where Userid = ‘10002459’ limit 100”)
head(data)
0 0
- RJDBC读取HIVE
- R 通过RJDBC连接hive
- JDBC & RJDBC
- 读取注册表hive文件
- spark-sql读取hive
- spark 读取hive parquet
- pyhs2读取Hive
- hive读取es数据
- hiveContext读取hive数据
- hcatalog读取hive数据并写入hive
- RJDBC 安装及调用问题
- R语言-RJDBC连接Teradata
- 使用hive读取hbase数据
- 使用hive读取hbase数据
- 使用hive读取hbase数据
- Hive 不同文件读取对比
- SparkSQL读取Hive中的数据
- Sark Sql读取hive数据
- A new day !
- OAuth 2.0系列教程(十一) 客户端证书请求和响应
- MySQL插入语句insert性能优化
- IntelJ IDEA 远程Tomcat Debug
- html meta设置自动跳转
- RJDBC读取HIVE
- 在win7下安装vc6.0时出现不能新建MFC的情况
- Android Studio 学习BUG 一
- Word Search II Leetcode Java
- Java jdbc中Statement,ResultSet,PreparedStatement
- 规则引擎连接数据库
- ViewController生命周期
- NSSet、NSMutableSet基本用法
- flash builder 4.6在debug调试时需要系统安装flashplayer debug版本