sphinx+mysql+mongodb 大数据量的数据显示

来源:互联网 发布:sql安装重启计算机 编辑:程序博客网 时间:2024/06/05 01:03

当数据量达到一定数量时比如上千万、上亿的数据,mysql需要分表来提高性能,但是分表之后带来的分页列表问题就成为了难题,尤其通过一定规则来进行分页显示就难上加难的了,但是通过sphinx+mysql+mongodb 的集合来显示就变得很容易了具体做法如下:

1:建立sphinx的分布式索引以一定的规则。

2:然后将利用sphinx过滤出来的id集合同一到mongodb中去获取信息。

3:把获取的信息显示出来就可以了。

因为mongodb对大数据量的性能是获取是非常的好的。mysql和mongodb之间的数据同步可以利用httpsqs来通过触发器打入队列,然后处理队列就可以同步mongodb了。






原创粉丝点击