20160512 GreenPlum10 SharedNothing架构、数据迁移
来源:互联网 发布:tk的域名 编辑:程序博客网 时间:2024/06/03 19:24
SharedNothing架构的特点是:
底层数据完全不共享,每个Segment只有一部分数据,每一个节点都通过网络连接在一起。
也就是各个处理单元都有自己独立的CPU、内存、硬盘,不存在共享资源,类似于MPP大规模并行处理模式,各节点独立处理自己的数据,处理完在上层进行汇总。
数据迁移:
两张表进行关联时,如果关联的数据不在一个节点上,是关联不上的,需要将数据汇入一个节点上才能关联,这就需要进行数据的迁移,迁移方式有两种:广播和数据重分布。
重分布举一个例子,比如一张成绩表,分布健是id,以成绩score进行group by分组,那么就需要将数据按照成绩进行重分布,重分布前会对每一个segment上的数据进行汇总,重分布后,同样分数score的数据就会在一个segment上,在汇总一次就可以了。
0 0
- 20160512 GreenPlum10 SharedNothing架构、数据迁移
- 互联网“平滑数据迁移”架构技术实践
- 关于ZNKC用户的数据迁移架构设计的回复
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 数据迁移
- 架构迁移技术选型
- SQLServer 服务器架构迁移
- 架构师之路(8)100亿数据平滑数据迁移,不影响服务
- java 对象序列化
- java解析xml文件(三种方式-(dom ,jdom ,dom4j)
- 【模版】最小表示法
- CSS中zoom:1的作用 ,小标签大作用
- 【原创】swarm源码分析(4)---Scheduler和Api
- 20160512 GreenPlum10 SharedNothing架构、数据迁移
- 游戏开发的职场前景不容乐观
- 如何让mybatis打印出执行的sql
- jenkins的svn路径中文问题
- 常用正则表达式
- linux分割压缩包与解压分割后的压缩包
- 我眼中的KMP
- 没想到!网络美女直播背后的真相居然是这样
- highcharts 统计图