四种数据库ETL模式
来源:互联网 发布:centos 6.8 破解密码 编辑:程序博客网 时间:2024/05/16 12:29
根据模型的设计和源数据的情况,有四种数据ETL模式:完全刷新、镜像增量、事件增量、镜像比较。
完全刷新:数据仓库数据表中只包括最新的数据,每次加载均删除原有数据,然后完全加载最新的源数据。这种模式下,数据抽取程序抽取源数据中的所有记录,在加载前,将目标数据表清空,然后加载所有记录。为提高删除数据的速度,一般是采用truncate清空数据表。如本系统中的入库当前信息表采用此种模式。
镜像增量:源数据中的记录定期更新,但记录中包括记录时间字段,源数据中保存了数据历史的记录,ETL可以通过记录时间将增量数据从源数据抽取出来以附加的方式加载到数据仓库中,数据的历史记录也会被保留在数据仓库中。
事件增量:每一个记录是一个新的事件,相互之间没有必然的联系,新记录不是对原有记录数值的变更,记录包括时间字段,可以通过时间字段将新增数据抽取出来加载到数据库中。
镜像比较:数据仓库数据具有生效日期字段以保存数据的历史信息,而源数据不保留历史并且每天都可能被更新。因此,只能将新的镜像数据与上次加载的数据的镜像进行比较,找出变更部分,更新历史数据被更新记录的生效终止日期,并添加变更后的数据。大多数源数据中需保存历史信息的维表。
TechTarget中国原创内容,原文链接:http://www.searchdatabase.com.cn/showcontent_9280.htm
- 四种数据库ETL模式
- 四种数据ETL模式
- 四种数据ETL模式
- 四种数据ETL模式
- 四种数据ETL模式
- 四种数据ETL模式
- 发现微软有四种数据库
- 四种数据库访问技术
- 数据仓库中的三种数据库模式
- javascript四种数据类型
- 四种数据库,取随机记录的方法
- 四种数据库,取随机记录的方法
- .net中提供了四种数据库连接方式
- [Django笔记]三. Django支持四种数据库
- java常用的四种数据库连接池
- 图解MyEclipse用DB Browser连接四种数据库
- Tokyo Cabinet 的四种数据结构
- Tokyo Cabinet 的四种数据结构
- Q89续
- 话说线程的四种暂停状态
- struts2.1.6 interceptor 09
- ProbeException解决办法:There is no WRITEABLE property named 'id' in class 'java.lang.String'
- JQuery学习-ListBox使用JQuery获取不重复的值添加到TextBox
- 四种数据库ETL模式
- Q89xuxu
- Qt编程推荐网站
- div的链接的颜色
- World Wind 1.4.1学习总结三 .
- 揭开站点导航的面纱(二)动态修改内存中的站点地图
- Qt远程连接MySql数据库
- MSSQLSERVER