spark sql读取mysql数据源并且将结果写入mysql
来源:互联网 发布:上海首届网络文化节 编辑:程序博客网 时间:2024/05/20 04:48
一、创建测试表t_user2、user_t和t_result
1、t_user2表结构如下:
2、user_t表结构如下:
3、t_result表结构如下:
4、插入测试数据:
二、创建maven工程,导入mysql驱动包、spark相关包
mysql-connector-java.5.1.24.jar
spark-assembly-1.6.2-hadoop2.6.0.jar
spark-examples-1.6.2-hadoop2.6.0.jar
注:pom.xml文件内容如下
三、创建本地执行的scala代码类:
SparkSqlMysqlDatasource.scala
结果:
id 12 ,name cassie, age 25
id 11 ,name zhangs, age 25
id 23 ,name zhangs, age 34
id 22 ,name tom, age 23
name zhangs
age 138.5
四、查看数据库表t_result,发现刚才从mysql中读取出来的数据已经插入到表中
以上内容已经测试通过,可根据需要修改,如有疑问请留言!谢谢
1 0
- spark sql读取mysql数据源并且将结果写入mysql
- spark将计算结果写入到mysql中
- Spark将计算结果写入到Mysql中
- Spark将计算结果写入到Mysql中
- Spark SQL将数据写入Mysql表的一些坑
- Spark SQL将数据写入Mysql表的一些坑
- Spark SQL将数据写入Mysql表的一些坑
- 将Mysql查询结果写入到文件
- Spark-SQL从MySQL中加载数据以及将数据写入到mysql中(Spark Shell方式,Spark SQL程序)
- mysql将查询结果写入变量,存储过程
- 将mysql执行结果按照固定格式写入文件
- saltstack--在master上直接将返回结果写入mysql
- 【go语言读取mysql】go语言连接mysql,并且查询出结果
- Spark写入数据到MySQL
- spark 读取mysql数据
- 循环读取数据库表数据,并且将结果集插入到sql文本中
- spark DataFrame 使用Java读取mysql和写入mysql的例子
- Postgresql 将SQL 查询结果写入文件
- HDU1671-Phone List
- json数据的封装与解析
- java OutOfMemoryError
- 7.13 KUVA 401Palindromes
- 用python开发了一个简单apache web服务端范例,在win10 + apache2.4.9 + python3.5 测试成功
- spark sql读取mysql数据源并且将结果写入mysql
- 周三--项目2 【建设“顺序表” 算法库】
- hdoj1003-Max Sum(数组的最大和)
- CentOS6.5安装apr优化tomcat7性能
- 洛谷 P1144 最短路计数
- 你不知道的JavaScript笔记之关于this
- Qt之QUrlQuery
- 堆排序
- 数组名与数组指针