Spark SQL应用实例
来源:互联网 发布:yyf淘宝店 编辑:程序博客网 时间:2024/04/28 00:08
import org.apache.spark._import org.apache.spark.sql._import SparkContext._object SQL { case class User(id: String, name: String, city: String, country: String) def main(args: Array[String]): Unit = { val sc = new SparkContext(new SparkConf().setAppName("SQL")) val sqlContext = new SQLContext(sc) import sqlContext.implicits._ val rddUser = sc.textFile("/user/wangzheng/event_user.csv") .map(_.split("\\,")) .filter(line => line.length >= 4) .map( p=>User( p(0), p(1), p(2), p(3) ) ).df rddUser.registerTempTable("UserTable") sqlContext.sql("select * from UserTable where id='13384681'").show }}
0 0
- Spark SQL应用实例
- Spark Streaming 应用实例
- Spark SQL 算子实例
- Spark Hive SQL实例
- Spark SQL 应用示例
- SQL应用实例
- sql merge应用实例
- Spark SQL相关API操作实例 spark研习第五季
- SPARK SQL华为应用现状分析
- SQL Server XML应用实例
- sql server2000 入门应用实例
- SQL Server游标应用实例
- Spark实例
- Flex 4 beta应用实例:Spark Intranet Sample App
- spark sql和catalyst实例结合源码分析
- spark SQL实例(load和save操作)
- Spark SQL用户自定义函数UDF及Apache日志实例
- Spark Streaming+Spark SQL
- ACdream1726
- 8.11 bzoj1036
- 第三方开源库:Zxing实现扫描和生成 一维码 + 二维码
- RHEL7与6开机过程比较
- 四边形不等式之石子归并
- Spark SQL应用实例
- Android studio下使用ShareSDK实现一键分享
- 最近邻查找算法kd-tree
- HDOJ 5363 Key Set
- JavaScript编程入门 --数据类型(null、 undefined)
- STM8 I2C从机
- RunLoop处理逻辑-官方版
- 使用Genymotion安装APK出现错误Failure [INSTALL_FAILED_NO_MATCHING_ABIS]解决办法
- Activity四种启动模式