这里有Amoeba支持驱动的说明不知道怎么样。Amoeba for mysql 0.14发布(读写分离、负载均衡...
来源:互联网 发布:犀牛软件和ug 编辑:程序博客网 时间:2024/04/28 06:14
(转)http://blog.sina.com.cn/s/blog_4dfcef8701009abu.html
Amoeba for mysql 0.14发布(读写分离、负载均衡...(2008-05-27 10:03:58)
标签:java amoeba mysql it 分类:java
Amoeba 是什么?
目前对于这个软件的定位是专注数据库数据切分,作为数据库代理。.目前已经对mysql进行代理,是基于对特定数据库软件的协议进行分析,因此对前端的数据库客户端来说,不管客户端采用jdbc、odbc、或者client tool都不影响,是完全透明的一层。
开源软件Amoeba定位是专注数据库数据切分,座落与Client、Database Server(s)之间。具有负载均衡、高可用性、sql过滤、可承受高并发、读写分离、Query Route(解析sql query语句,并且根据条件与预先设定的规则,请求到指定的目标数据库。可并发请求多台数据库合并结果)。不管客户端采用jdbc、odbc、或者client tool都不影响,是客户端完全透明的。目前我已经将该项目放到sourceforge上面
主要降低数据切分带来的复杂多数据库结构、数据切分规则给应用带来的影响。
能够轻易实现读写分离
Failover
负载均衡。
能够帮助解决数据切分问题
目前amoeba 实现了 mysql 数据库的相关技术。
Amoeba for mysql相关:
适用:
mysql 4.1或者以上版本(mysql 协议版本:10)
暂时不支持事务、DDL语句目前只会分配给默认的数据库执行
运行环境:
至少需要运行 mysql 4.1以上 服务一个;
Java 1.5或 以上版本
中文文档地址: http://amoeba.sourceforge.net/amoeba.pdf
文件下载: http://www.sourceforge.net/projects/amoeba
主要降低数据切分带来的复杂多数据库结构、数据切分规则给应用带来的影响。
能够轻易实现读写分离
Failover
负载均衡。
能够帮助解决数据切分问题
目前amoeba 实现了 mysql 数据库的相关技术。
Amoeba for mysql相关:
适用:
mysql 4.1或者以上版本(mysql 协议版本:10)
暂时不支持事务、DDL语句目前只会分配给默认的数据库执行
运行环境:
至少需要运行 mysql 4.1以上 服务一个;
Java 1.5或 以上版本
中文文档地址: http://amoeba.sourceforge.net/amoeba.pdf
文件下载: http://www.sourceforge.net/projects/amoeba
目前国内无法登陆sf主站点,可以到 http://amoeba.sourceforge.net/amoeba-mysql-0.16.zip 下载
====================================================================
示意图:
相关描述:
Master: server1 (可读写)
slaves:server2、server3、server4(3个平等的数据库。只读/负载均衡)
amoeba提供读写分离pool相关配置。并且提供负载均衡配置。
可配置server2、server3、server4形成一个虚拟的 virtualSlave,该配置提供负载均衡、failOver、故障恢复功能
Xml代码
- <className>com.meidusa.amoeba.server.MultipleServerPool</< SPAN>className>
- <property name="loadbalance">1</< SPAN>property>
- <property name="poolNames">server2,server3,server4</< SPAN>property>
- </< SPAN>poolConfig>
- </< SPAN>dbServer>
如果不启用数据切分,那么只需要配置QueryRouter属性
wirtePool=server1
readPool=virtualSlave
wirtePool=server1
readPool=virtualSlave
那么遇到update/insert/delete将 query语句发送到 wirtePool,将 select发送到 readPool机器中执行。
二、数据切分:
这方面amoeba显然更加容易了。
举个数据切分例子:
select * from user_event where user_id='test' and gmt_create between Sysdate() -1 and Sysdate()
如果根据gmt_create 时间进行数据切分,比如 6个月进行切分一次
amoeba提供利用类似sql表达式进行数据切分:
规则1:GMT_CREATE > to_date('2008-01-01','yyyy-mm-dd') and GMT_CREATE < to_date('2008-05-31','yyyy-mm-dd')
规则1对应服务器1
规则2:GMT_CREATE > to_date('2008-06-01','yyyy-mm-dd') and GMT_CREATE < to_date('2008-12-31','yyyy-mm-dd')
规则2对应服务器2
上面的sql的条件 gmt_create 与规则里面的的gmt_create 进行交集判断,如果存在交集则表示符合规则。
则会将sql转移到 规则1 的相应的服务器上面执行。
利用amoeba写出这种类似规则很容易,但是要想做到数据切分以后可线性扩容,那么这样的规则需要自己根据业务实际情况进行设置。
amoeba可同时将sql 并发分发到多台服务器、然后将结果合并再反馈给客户端,而且amoeba内部现成采用无阻塞模式,工作线程是不会等待的,并发请求多台 database server情况下,客户端等待的时间基本上面是性能最差的那台 database server+amoeba内部解析协议的时间
二、数据切分:
这方面amoeba显然更加容易了。
举个数据切分例子:
select * from user_event where user_id='test' and gmt_create between Sysdate() -1 and Sysdate()
如果根据gmt_create 时间进行数据切分,比如 6个月进行切分一次
amoeba提供利用类似sql表达式进行数据切分:
规则1:GMT_CREATE > to_date('2008-01-01','yyyy-mm-dd') and GMT_CREATE < to_date('2008-05-31','yyyy-mm-dd')
规则1对应服务器1
规则2:GMT_CREATE > to_date('2008-06-01','yyyy-mm-dd') and GMT_CREATE < to_date('2008-12-31','yyyy-mm-dd')
规则2对应服务器2
上面的sql的条件 gmt_create 与规则里面的的gmt_create 进行交集判断,如果存在交集则表示符合规则。
则会将sql转移到 规则1 的相应的服务器上面执行。
利用amoeba写出这种类似规则很容易,但是要想做到数据切分以后可线性扩容,那么这样的规则需要自己根据业务实际情况进行设置。
amoeba可同时将sql 并发分发到多台服务器、然后将结果合并再反馈给客户端,而且amoeba内部现成采用无阻塞模式,工作线程是不会等待的,并发请求多台 database server情况下,客户端等待的时间基本上面是性能最差的那台 database server+amoeba内部解析协议的时间
- 这里有Amoeba支持驱动的说明不知道怎么样。Amoeba for mysql 0.14发布(读写分离、负载均衡...
- amoeba的读写分离和负载均衡
- amoeba的读写分离和负载均衡
- Amoeba for mysql读写分离
- Amoeba for mysql读写分离
- Amoeba整合MMM实现高可用负载均衡,读写分离,主从复制的MySQL
- mysql amoeba读写分离
- MySQL Amoeba读写分离
- mysql读写分离 amoeba
- MySQL-amoeba-读写分离
- Amoeba for MySQL读写分离配置
- Mysql 基于 Amoeba 的 读写分离
- mysql基于amoeba的读写分离
- MySQL的读写分离之Amoeba
- mysql基于amoeba的读写分离
- Keepalive+Amoeba+Mysql 实现高可用,负载均衡及读写分离
- Amoeba+mysql实现读写分离
- mysql集群-amoeba读写分离
- Dev tdxDBTreeView
- 把“女友”升级为“妻子”时发生的bug……
- 堆和栈的区别
- 如何通过互联网联接到某个连上互联网的局域网中的一台计算机上的MSSQL上
- 沈阳一家烧烤店的腌肉配方
- 这里有Amoeba支持驱动的说明不知道怎么样。Amoeba for mysql 0.14发布(读写分离、负载均衡...
- VC中利用多线程技术实现线程之间的通信
- Visual C++进程间数据通信的实现
- SQL Server XQuery 学习笔记(结束)
- java日期格式函数的用法与实例
- CCommandLineInfo
- 海量数据分页存储过程及使用
- HttpClient简介
- 利用存储映射实现线程间通信
amoeba for mysql主要是针对数据切分方面。
在 mysql proxy 上面如果想要读写分离并且读集群、写集群机器比较多情况下,用mysql proxy 需要相当大的工作量,目前mysql proxy没有现成的 lua脚本。mysql proxy根本没有配置文件,lua脚本就是它的全部,当然可以是相当方便的。那么同样这种东西需要编写大量的lua脚本才能完成一个复杂的配置。amoeba目标是走产品化这条路。只需要进行相关的配置就可以满足需求。
一、Mysql Master/Slave 结构之下的读写分离: