如何构建分布式大型数据库
来源:互联网 发布:sql替换某字符后面的 编辑:程序博客网 时间:2024/06/06 03:33
随着应用的增加,数据量日双增长,一般电脑以难以维持时,分布式数据库是一个很好的选择。最近研究了一下分布式数据库的存储与分布式算法,现总结了一下。
分布式数据的存储为确保数据紧密一致,在我的测试中用了聚块分片的方式。也就是把数据文件看成是一随机分的由块够成的,这样以来数据占用空间比固定块的方式要紧密一些,特别是纯索引的情况下,在带数据块(BTree带数据块)的情况下也相当好,4000万20byte键int 值占用900M算来还相当于压缩了一点。
分式算法对分布式数据库很重要,在BTree中数据量相当大时,可对BTree进行分布式处理,分布式BTree树可看成是,很多小树组成的一棵树,每一棵小树对应一个计算单元,要计算时数据入队列计算。在刷数据到文件时,应用MPI的窗口把更改的数据依次刷入文件,这样应快些。小树分离算也很重要,能保持数据库计算的平衡。
(以上分布式算是构想中,未测,但单机多线测试良好)
- 如何构建分布式大型数据库
- 如何构建Informix分布式数据库访问
- 如何构建大型网站架构
- 如何构建大型网站架构
- 如何构建大型网站架构
- 大型电子商务架构之-分布式数据库架构
- 大型分布式数据库应用的案例
- 大型分布式数据库集群的研究
- 如何构建一个分布式爬虫
- (转载)如何构建大型网站架构
- (转载)如何构建大型网站架构
- 构建高性能的大型分布式Java应用
- 构建一个大型分布式系统的影响因素
- 构建大型云计算平台分布式技术的实践
- .NET Remoting构建分布式数据库查询
- 如何利用Node.js 构建分布式集群
- 如何构建高可用的分布式系统
- 如何构建一个分布式爬虫:理论篇
- DES数据加密标准---初步了解
- stm32 I2C问题 I2C_CheckEvent()
- 静态工厂方法
- mongodb数据文件格式
- C#继承和多态
- 如何构建分布式大型数据库
- oracle 合并表碎片
- 检测BLOB字段是否为空
- Liferay 6.0.5 RenderURL页面跳转
- hdu 2554 每个数字有2个 相同数字k之间有k个数 问这样的排列是否存在 数论!!!
- 初学ajax-------使用ajax判断验证码
- Oracle的优化器的RBO和CBO方式
- Climbing Stairs
- 文件 I/O——read函数write函数