【引用】如何配置Memcached服务器

        Memcached是高性能的，分布式的内存对象缓存系统，用于在动态应用中减少数据库负载，提升访问速度。Memcached由Danga Interactive（运营LiveJournal的技术团队）开发，用于提升LiveJournal.com访问速度的。  LJ每秒动态页面访问量是几千次，用户700万。Memcached将数据负载大幅度降低，更好的分配资源，更快速访问。

        其实Memcache是这个项目的名称，而memcached是它服务器端的主程序文件名

        Memcached可以应对任意多个连接，使用非阻塞的网络IO。由于它的工作机制是在内存中开辟一块空间，然后建立一个HashTable，Memcached自管理这些HashTable.

        虽然memcached使用了同样的“Key=>Value”方式组织数据，但是它和共享内存、APC等本地缓存有非常大的区别。 Memcached是分布式的，也就是说它不是本地的。它基于网络连接（当然它也可以使用localhost）方式完成服务，本身它是一个独立于应用的程 序或守护进程（Daemon方式）。

 

        Memcached最吸引人的一个特性就是支持分布式部署；也就是说可以在一群机器上建立一堆 Memcached 服务，每个服务可以根据具体服务器的硬件配置使用不同大小的内存块，这样一来，理论上可以建立一个无限巨大的基于内存的cache storage 系统。

        Memcached使用libevent库实现网络连接服务，理论上可以处理无限多的连接，但是它和Apache不同，它更多的时候是面向稳定的持续连接 的，所以它实际的并发能力是有限制的。在保守情况下memcached的最大同时连接数为200，这和Linux线程能力有关系，这个数值是可以调整的。 关于libevent可以参考相关文档。 Memcached内存使用方式也和APC不同。APC是基于共享内存和MMAP的，memcachd有自己的内存分配算法和管理方式，它和共享内存没有 关系，也没有共享内存的限制，通常情况下，每个memcached进程可以管理2GB的内存空间，如果需要更多的空间，可以增加进程数。

 

        Memcached在很多时候都是作为数据库前端cache使用的。因为它比数据库少了很多SQL解析、磁盘操作等开销，而且它是使用内存来管理数据的， 所以它可以提供比直接读取数据库更好的性能，在大型系统中，访问同样的数据是很频繁的，memcached可以大大降低数据库压力，使系统执行效率提升。 另外，memcached也经常作为服务器之间数据共享的存储媒介，例如在SSO系统中保存系统单点登陆状态的数据就可以保存在memcached中，被 多个应用共享。

        需要注意的是，使用Memcache的网站一般流量都是比较大的，为了缓解数据库的压力，让Memcache作为一个缓存区域，把部分信息保存在内存中， 在前端能够迅速的进行存取。由于memcached使用内存管理数据，所以它是易失的，当服务器重启，或者memcached进程中止，数据便会丢失，所 以memcached不能用来持久保存数据。很多人的错误理解，memcached的性能非常好，好到了内存和硬盘的对比程度，其实memcached使 用内存并不会得到成百上千的读写速度提高，它的实际瓶颈在于网络连接，它和使用磁盘的数据库系统相比，好处在于它本身非常“轻”，因为没有过多的开销和直 接的读写方式，它可以轻松应付非常大的数据交换量，所以经常会出现两条千兆网络带宽都满负荷了，memcached进程本身并不占用多少CPU资源的情 况。

       Memcached是“分布式”的内存对象缓存系统，所以那些不需要“分布”的，不需要共享的，或者干脆规模小到只有一台服务器的应用，memcached不会带来任何好处，相反还会拖慢系统效率，因为网络连接同样需要资源，即使是UNIX本地连接也一样。

 

Windows下的Memcache安装

1. 下载memcache的windows稳定版，解压放某个盘下面，比如在c:\memcached

2. 在终端（也即cmd命令界面）下输入 c:\memcached\memcached.exe -d install            －－安装memcached成为服务，这样才能正常运行，否则运行失败！
 

3. 再输入： c:\memcached\memcached.exe -d start    －－启动memcached的。

   
      以后memcached将作为windows的一个服务每次开机时自动启动。这样服务器端已经安装完毕了。

Linux下的安装：

1.下载memcached和libevent，放到 /tmp 目录下

# cd /tmp
# wget http://www.danga.com/memcached/dist/memcached-1.2.0.tar.gz
# wget http://www.monkey.org/~provos/libevent-1.2.tar.gz

2.先安装libevent：
# tar zxvf libevent-1.2.tar.gz
# cd libevent-1.2
# ./configure –prefix=/usr
# make
# make install

3.测试libevent是否安装成功：
# ls -al /usr/lib | grep libevent
lrwxrwxrwx 1 root root 21 11?? 12 17:38 libevent-1.2.so.1 -> libevent-1.2.so.1.0.3
-rwxr-xr-x 1 root root 263546 11?? 12 17:38 libevent-1.2.so.1.0.3
-rw-r–r– 1 root root 454156 11?? 12 17:38 libevent.a
-rwxr-xr-x 1 root root 811 11?? 12 17:38 libevent.la
lrwxrwxrwx 1 root root 21 11?? 12 17:38 libevent.so -> libevent-1.2.so.1.0.3

4.安装memcached，同时需要安装中指定libevent的安装位置：
# cd /tmp
# tar zxvf memcached-1.2.0.tar.gz
# cd memcached-1.2.0
# ./configure –with-libevent=/usr
# make
# make install

如果中间出现报错，请仔细检查错误信息，按照错误信息来配置或者增加相应的库或者路径。
安装完成后会把memcached放到 /usr/local/bin/memcached ，

5.测试是否成功安装memcached：
# ls -al /usr/local/bin/mem*
-rwxr-xr-x 1 root root 137986 11?? 12 17:39 /usr/local/bin/memcached
-rwxr-xr-x 1 root root 140179 11?? 12 17:39 /usr/local/bin/memcached-debug

memcached的基本设置：

1.启动Memcache的服务器端：
# /usr/local/bin/memcached -d -m 10 -u root -l 192.168.0.200 -p 12000 -c 256 -P /tmp/memcached.pid

-d选项是启动一个守护进程，
-m是分配给Memcache使用的内存数量，单位是MB，这里是10MB，
-u是运行Memcache的用户，这里是root，
-l是监听的服务器IP地址，如果有多个地址的话，这里指定了服务器的IP地址192.168.0.200，
-p是设置Memcache监听的端口，这里设置了12000，最好是1024以上的端口，
-c选项是最大运行的并发连接数，默认是1024，这里设置了256，按照你服务器的负载量来设定，
-P是设置保存Memcache的pid文件，这里是保存在 /tmp/memcached.pid，

2.如果要结束Memcache进程，执行：

# kill `cat /tmp/memcached.pid`

也可以启动多个守护进程，不过端口不能重复。

3.重启apache，service httpd restart

 

java的客户端连接程序：

       将java_memcached-release_1.6.zip解压后的目录中的java_memcached-release_2.0.jar文件复制到java项目的lib目录下。

 

package utils.cache;

import java.util.Date;

import com.danga.MemCached.MemCachedClient;
import com.danga.MemCached.SockIOPool;

/**
* 使用memcached的缓存实用类.
*/
public class MemCached
{
    // 创建全局的唯一实例
    protected static MemCachedClient  mcc =  new MemCachedClient();
   
    protected static MemCached memCached = new MemCached();
   
    // 设置与缓存服务器的连接池
    static {
        // 服务器列表和其权重
        String[] servers = {"127.0.0.1:11211"};
        Integer[] weights = {3};

        // 获取socke连接池的实例对象
        SockIOPool  sockIOPool = SockIOPool.getInstance();

        // 设置服务器信息
        sockIOPool.setServers( servers );
        sockIOPool.setWeights( weights );

        // 设置初始连接数、最小和最大连接数以及最大处理时间
        sockIOPool.setInitConn( 5 );
        sockIOPool.setMinConn( 5 );
        sockIOPool.setMaxConn( 250 );
        sockIOPool.setMaxIdle( 1000 * 60 * 60 * 6 );

        // 设置主线程的睡眠时间
        sockIOPool.setMaintSleep( 30 );

        // 设置TCP的参数，连接超时等
        sockIOPool.setNagle( false );
        sockIOPool.setSocketTO( 3000 );
        sockIOPool.setSocketConnectTO( 0 );

        //sockIOPool.setFailover(bFailover);
        //sockIOPool.setAliveCheck(bAliveCheck);

        // 初始化连接池
        sockIOPool.initialize();

        // 压缩设置，超过指定大小（单位为K）的数据都会被压缩     

        if (memCachedClient == null)
        {
            mcc = new MemCachedClient(sPoolName);
            mcc.setCompressEnable(true);
            mcc.setCompressThreshold(4096);
            mcc.setPrimitiveAsString(true);
        }
    }

/*

<h3>基于Spring的配置，如下：</h3>
  <pre>
   &lt;bean id="memCachedService" class="com.ms.memcached.MemCachedServiceImpl"&gt;
    &lt;constructor-arg index="0" value="${memcached.pool.name}" /&gt;
    &lt;constructor-arg index="1" value="${memcached.pool.servers}" /&gt;
    &lt;constructor-arg index="2" value="${memcached.pool.initConn}" /&gt;
    &lt;constructor-arg index="3" value="${memcached.pool.maxConn}" /&gt;
    &lt;constructor-arg index="4" value="${memcached.pool.minConn}" /&gt;
    &lt;constructor-arg index="5" value="${memcached.pool.socketTO}" /&gt;
    &lt;constructor-arg index="6" value="${memcached.pool.maintSleep}" /&gt;
    &lt;constructor-arg index="7" value="${memcached.pool.nagle}" /&gt;
    &lt;constructor-arg index="8" value="${memcached.pool.failover}" /&gt;
    &lt;constructor-arg index="9" value="${memcached.pool.aliveCheck}" /&gt;
    &lt;/bean&gt;
    </pre>
    <h3>利用com.MS.cache.properties来设置参数，如下：</h3>
    <pre>
    memcached.pool.name = MS
    memcached.pool.servers = 192.168.9.132:12000,192.168.9.133:12000
    memcached.pool.initConn = 128
    memcached.pool.maxConn = 1024
    memcached.pool.minConn = 20
    memcached.pool.socketTO = 3000
    memcached.pool.maintSleep = 30
    memcached.pool.nagle = false
    memcached.pool.failover = true
    memcached.pool.aliveCheck = true
    </pre>

*/

 
    /**
     * 保护型构造方法，不允许实例化！
     */
    protected MemCached()
    {
       
    }
   
    /**
     * 获取唯一实例.
     */
    public static MemCached getInstance()
    {
        return memCached;
    }
   
    /**
     * 添加一个指定的值到缓存中.
     * @param key
     * @param value
     */

    //新增指定key的缓存内容，但不覆盖已存在的内容。
    public boolean add(String key, Object value)
    {
        return mcc.add(key, value);
    }
  

   //expiry过期时间
    public boolean add(String key, Object value, Date expiry)
    {
        return mcc.add(key, value, expiry);
    }
  

    //新增或覆盖指定Key的缓存内容
    public boolean set(String key, Object value)
    {
        return mcc.set(key, value);
    }
  

    //lExpiry过期时间
    public boolean set(String key, Object value, long lExpiry)
    {
        return mcc.set(key, value, new Date(lExpiry));
    }

 
   //根据指定的Key获取缓存内容

    public boolean get(String key)
    {
        return mcc.get(key);
    }

    //根据指定Key更新缓存内容
    public boolean replace(String key, Object value)
    {
        return mcc.replace(key, value);
    }
  

    //lExpiry 指定的时间
    public boolean replace(String key, Object value, long lExpiry)
    {
        return mcc.replace(key, value, new Date(lExpiry));
    }

     //根据指定Key删除缓存内容
    public boolean delete(String key, Object value)
    {
        return mcc.delete(key, value);
    }

    //根据指定Key在指定时间后删除缓存内容
     public boolean delete(String key, Object value, long lExpiry)
    {
        return mcc.delete(key, value, new Date(lExpiry));
    }

  

    //检测Cache中当前Key是否存在
     public boolean exists(String key)
    {
        return mcc.exists(key);
    }

   //根据指定一批Key批量获取缓存内容。
   /*
   * @param sKeys 指定的一批Key。
   * @return Object[oValue]
   */
    public Object[] getMultiArray(String[] sKeys) throws ServiceException
   {
       return memCachedClient.getMultiArray(sKeys);
   }

   /**
   * 根据指定一批Key批量获取缓存内容。
   *
   * @param sKeys 指定的一批Key。
   * @return Map<sKey, oValue>
   */
    public Map<String, Object> getMulti(String[] sKeys) throws ServiceException
   {
       return memCachedClient.getMulti(sKeys);
   }
       
    public static void main(String[] args)
    {
        MemCached memCached= MemCached.getInstance();
        memCached.add("hello", 234);
        System.out.print("get value : " + memCached.get("hello"));
    }
}

    那么我们就可以通过简单的像main方法中操作的一样存入一个变量，然后再取出进行查看，我们可以看到先调用了add，然后再进行get，我们运行一次 后，234这个值已经被我们存入了memcached的缓存中的了，我们将main方法中红色的那一行注释掉后，我们再运行还是可以看到get到的 value也是234，即缓存中我们已经存在了数据了。

    对基本的数据我们可以操作，对于普通的POJO而言，如果要进行存储的话，那么比如让其实现java.io.Serializable接口，因为 memcached是一个分布式的缓存服务器，多台服务器间进行数据共享需要将对象序列化的，所以必须实现该接口，否则会报错的。

Entity

/**
  * 获取当前实体的缓存Id
  *
  * @return
  */
 public String getCacheId()
 {
  return getCacheId(this.getClass(), sBreedId);
 }

 

get

  public Breed getBreedById(String sBreedId) throws ServiceException
  {
     Breed breed = (Breed)memCachedService.get(getCacheId(Breed.class, sBreedId));
 
     if(breed == null)
     {
        breed = service.get("breed.getBreedById", sBreedId);
  
        if(breed != null)
        {
           memCachedService.set(breed.getBreedId(), breed);
        }
     }
 
     return breed;
  } 
 

save

   memCachedService.set(spider.getCacheId(), breed);

 

update

   memCachedService.replace(spider.getCacheId(), breed);

 

remove

   memCachedService.delete(getCacheId(Spider.class, IbreedId));
 或
   memCachedService.delete(breed.getCacheId());

listAll

   public List listAll() throws ServiceException
   {
      List breeds = new ArrayList ();
 
      List breedIds = (List)memCachedService.get(getKeyByMap("Breed", null));
 
      if(ObjectUtils.isEmpty(breedIds))
      {
         breeds = service.list("breed.getAllBreed", null);
  
         if (!ObjectUtils.isEmpty(breeds))
         {
            breedIds = new ArrayList();
   
            for (Breed breed : breeds)
            {
                breedIds.add(breed.getBreedId());
            }
   
            memCachedService.set(getKeyByMap("Breed", null), breedIds);
         }
      }
      else
      {
           for (String sBreedId : breedIds)
           {
               Breed breed = getBreedById(sBreedId);
   
               if (breed != null)
               {
                  breeds.add(breed);
               }
           }
      }
 
      return breeds;
    }