分布式缓存

1.什么是缓存？

    缓存就是用来避免频繁的到数据库或磁盘文件获取数据而建立的一个快速临时存储器。一般来说，缓存比数据库或磁盘容量更小，但是存取速度非常快。一般来说，内存是当前技术下最廉价且有效的缓存介质。内存价格低廉，但是存取速度是一般磁盘IO无法比拟的。

2.缓存的作用

   1 . 存储频繁访问的数据

   2.临时存储耗时的计算结果

   3.内存缓存减少磁盘IO

3. 缓存类型

   a. 应用层缓存

    应用层缓存这块跟开发人员关系最大，也是平时经常接触的。

    1、缓存数据库的查询结果,减少数据的压力。这个在大型网站是必须做的。

    2、缓存磁盘文件的数据。比如常用的数据可以放到内存，不用每次都去读取磁盘，特别是密集计算的程序，比如中文分词的词库。

    3、缓存某个耗时的计算操作，比如数据统计。

    应用层缓存的架构也可以分几种：

    1、嵌入式，也就是缓存和应用在同一个机器。比如单机的文件缓存，java中用hashMap来缓存数据等等。 这种缓存速度快，没有网络消耗。

    2、分布式缓存，把缓存的数据独立到不同的机器，通过网络来请求数据，比如常用的memcache就是这一类。

    分布式缓存一般可以分为几种:

      1、按应用切分数据到不同的缓存服务器，这是一种比较简单和实用的方式。

      2、按照某种规则（hash,路由等等）把数据存储到不同的缓存服务器。

      3、代理模式，应用在获取数据的时候都由代理透明的处理，缓存机制有代理服务器来处理。 (比较安全) 采用 Magent 缓存代理；

    b. 前端缓存

   我们这里说的前端缓存可以理解为一般使用的cdn技术，利用squid等做前端缓冲技术，主要还是针对静态文件类型，比如图片，css,js,html等静态文件。

备注：Squid作为网页服务器的前置cache服务器，可以代理用户向web服务器请求数据并进行缓存，但是在window上好像不可以用

    C. 客户端缓存

浏览器端的缓存，可以让用户请求一次之后，下一次不在从服务器端请求数据，直接从本地缓存读取，可以减轻服务器负担也可以加快用户的访问速度。（浏览器自带）。

4.如何用memcached部署分布式缓存   

1、首先介绍下需要使用的memcached代理服务器magent

       magent是一款开源的memcached代理服务器，项目网址为：http://code.google.com/p/memagent/

2、安装libevent、memcached。

       在之前文章中有介绍，请参见：http://blog.csdn.net/zhsj1106/article/details/7877542

3、安装magent：

      下载地址：http://www.kuaipan.cn/file/id_7845608170131207.htm

[plain] view plaincopy

1. mkdir magent  
2. cd ./magent  
3. wget http://memagent.googlecode.com/files/magent-0.5.tar.gz  
4. tar zxvf magent-0.5.tar.gz  
5. /sbin/ldconfig  
6. sed -i "s#LIBS = -levent#LIBS = -levent -lm#g" Makefile  
7. make  
8. cp magent /usr/bin/magent  

如果在make的时候，发生错误如下：

[plain] view plaincopy

1. gcc -lrt -Wall -g -O2 -I/usr/local/include -m64 -c -o magent.o magent.c  
2. magent.c: In function ‘writev_list’:  
3. magent.c:729: error: ‘SSIZE_MAX’ undeclared (first use in this function)  
4. magent.c:729: error: (Each undeclared identifier is reported only once  
5. magent.c:729: error: for each function it appears in.)  
6. make: *** [magent.o] Error 1  

解决办法如下：

[plain] view plaincopy

1. vi ketama.h  

在开头加入

[plain] view plaincopy

1. #ifndef SSIZE_MAX  
2. # define SSIZE_MAX      32767  
3. #endif  

4、使用实例

启动三个memcached实例：

[plain] view plaincopy

1. memcached -m 1 -u root -d -l 192.168.136.129 -p 11211  
2. memcached -m 1 -u root -d -l 192.168.136.129 -p 11212  
3. memcached -m 1 -u root -d -l 192.168.136.129 -p 11213  

通过magent代理三个实例：

[plain] view plaincopy

1. magent -u root -n 51200 -l 127.0.0.1 -p 12000 -s 127.0.0.1:11211 -s 127.0.0.1:11212 -b 127.0.0.1:11213  

a、分别在11211,、11212、11213端口启动memcached实例，在12000端口开启magent代理实例

b、11211、11212端口为主memcached，11213为备份memcached。

c、客户端连接12000端口，连接magent，进行memcached操作，相应的值会写到11211,、11212、11213三个端口的实例。

d、当11211、11212端口的Memcached死掉，连接到12000端口的magent取数据，数据会从11213端口的Memcached取出；当11211和11212重启之后，连接到12000端口的magent取数据，数据会丢失。

e、当11211端口的Memcached死掉，magent会从11212端口的memcached取值，重启11211端口的memcached实例，连接12000端口的magent取值，不会发生错误，但11211的memcached实例的数据已经丢失。

在linux（centos）服务器上安装memcached：http://blog.csdn.net/zhsj1106/article/details/7877542

memcached和spring集成：http://blog.csdn.net/zhsj1106/article/details/7877581