Memchae

来源:互联网 发布:第五元素 知乎 编辑:程序博客网 时间:2024/05/21 17:04

memcached应用服务器CC#C++

1. Memchae是什么

Memcache 是 danga.com 的一个项目,最早是为 LiveJournal 服务的,目前全世界不少人使用这个缓存项目来构建自己大负载的网站,来分担数据库的压力。

它可以应对任意多个连接,使用非阻塞的网络 IO 。由于它的工作机制是在内存中开辟一块空间,然后建立一个HashTable , Memcached 自管理这些 HashTable 。

   

为什么会有 Memcache 和 memcached 两种名称?

其实 Memcache 是这个项目的名称,而 memcached 是它服务器端的主程序文件名,

Memcache 官方网站: http://www.danga.com/memcached ,

2.Memcached的工作原理

首先 memcached 是以守护程序方式运行于一个或多个服务器中,随时接受客户端的连接操作,客户端可以由各种语言编写,目前已知的客户端 API 包括 Perl/PHP/Python/Ruby/Java/C#/C 等等。客户端在与 memcached 服务建立连接之后,接下来的事情就是存取对象了,每个被存取的对象都有一个唯一的标识符 key ,存取操作均通过这个 key 进行,保存到 memcached 中的对象实际上是放置内存中的,并不是保存在 cache 文件中的,这也是为什么 memcached 能够如此高效快速的原因。注意,这些对象并不是持久的,服务停止之后,里边的数据就会丢失。

 

与许多 cache 工具类似, Memcached 的原理并不复杂。它采用了 C/S 的模式,在 server 端启动服务进程,在启动时可以指定监听的 ip ,自己的端口号,所使用的内存大小等几个关键参数。一旦启动,服务就一直处于可用状态。Memcached 的目前版本是通过 C 实现,采用了单进程,单线程,异步 I/O ,基于事件 (event_based) 的服务方式 . 使用libevent 作为事件通知实现。多个 Server 可以协同工作,但这些 Server 之间是没有任何通讯联系的,每个 Server 只是对自己的数据进行管理。 Client 端通过指定 Server 端的 ip 地址 ( 通过域名应该也可以 ) 。需要缓存的对象或数据是以key->value 对的形式保存在 Server 端。 key 的值通过 hash 进行转换,根据 hash 值把 value 传递到对应的具体的某个Server 上。当需要获取对象数据时,也根据 key 进行。首先对 key 进行 hash ,通过获得的值可以确定它被保存在了哪台 Server 上,然后再向该 Server 发出请求。 Client 端只需要知道保存 hash(key) 的值在哪台服务器上就可以了。

 

        其实说到底, memcache 的工作就是在专门的机器的内存里维护一张巨大的 hash 表,来存储经常被读写的一些数组与文件,从而极大的提高网站的运行效率。

3. Memcached的特点 
       Memcached的缓存是一种分布式的,可以让不同主机上的多个用户同时访问, 因此解决了共享内存只能单机应用的局限,更不会出现使用数据库做类似事情的时候,磁盘开销和阻塞的发生。


4.Memcached的使用 

一 、windows下Memcached服务器端的安装 (此处将其作为系统服务安装) 
     下载文件:memcached 1.2.1 for Win32 binaries (Dec 23, 2006)

                 地址:http://jehiah.cz/projects/memcached-win32/ 
   1 解压缩文件到c:\memcached 
   2 命令行输入 'c:\memcached\memcached.exe -d install' 
   3 命令行输入 'c:\memcached\memcached.exe -d start' ,该命令启动 Memcached ,默认监听端口为 11211

通过 memcached.exe -h 可以查看其帮助

        对应命令参数说明:

 memcached的基本设置:

 -p           监听的端口
 -l            连接的IP地址, 默认是本机
 -d           start 启动memcached服务
 -d           restart 重起memcached服务
 -d           stop|shutdown 关闭正在运行的memcached服务
 -d           install 安装memcached服务
 -d           uninstall 卸载memcached服务
 -u           以的身份运行 (仅在以root运行的时候有效)
 -m           最大内存使用,单位MB。默认64MB
 -M           内存耗尽时返回错误,而不是删除项
 -c            最大同时连接数,默认是1024
 -f            块大小增长因子,默认是1.25
 -n           最小分配空间,key+value+flags默认是48
 -h           显示帮助

 

二、客户端使用

           下载memcached java client:http://github.com/gwhalin/Memcached-Java-Client/downloads 
   1 解压后将java_memcached-release_2.5.1.jar包添加到工程的classpath中

三、测试用例  

 

Java代码  收藏代码
  1. package com.leayo;  
  2.   
  3. import java.util.Date;  
  4.   
  5. import com.danga.MemCached.MemCachedClient;  
  6. import com.danga.MemCached.SockIOPool;  
  7.   
  8. @SuppressWarnings("deprecation")  
  9. public class Test {  
  10.   
  11.     protected static MemCachedClient mcc = new MemCachedClient();  
  12.   
  13.     static {  
  14.         String[] servers = { "127.0.0.1:11211" };  
  15.   
  16.         Integer[] weights = { 3 };  
  17.   
  18.         // 创建一个实例对象SockIOPool  
  19.         SockIOPool pool = SockIOPool.getInstance();  
  20.   
  21.         // set the servers and the weights  
  22.         // 设置Memcached Server  
  23.         pool.setServers(servers);  
  24.         pool.setWeights(weights);  
  25.   
  26.         // set some basic pool settings  
  27.         // 5 initial, 5 min, and 250 max conns  
  28.         // and set the max idle time for a conn  
  29.         // to 6 hours  
  30.         pool.setInitConn(5);  
  31.         pool.setMinConn(5);  
  32.         pool.setMaxConn(250);  
  33.         pool.setMaxIdle(1000 * 60 * 60 * 6);  
  34.   
  35.         // set the sleep for the maint thread  
  36.         // it will wake up every x seconds and  
  37.         // maintain the pool size  
  38.         pool.setMaintSleep(30);  
  39.   
  40.         // Tcp的规则就是在发送一个包之前,本地机器会等待远程主机  
  41.         // 对上一次发送的包的确认信息到来;这个方法就可以关闭套接字的缓存,  
  42.         // 以至这个包准备好了就发;  
  43.         pool.setNagle(false);  
  44.         // 连接建立后对超时的控制  
  45.         pool.setSocketTO(3000);  
  46.         // 连接建立时对超时的控制  
  47.         pool.setSocketConnectTO(0);  
  48.   
  49.         // initialize the connection pool  
  50.         // 初始化一些值并与MemcachedServer段建立连接  
  51.         pool.initialize();  
  52.   
  53.         // lets set some compression on for the client  
  54.         // compress anything larger than 64k  
  55.         mcc.setCompressEnable(true);  
  56.         mcc.setCompressThreshold(64 * 1024);  
  57.     }  
  58.   
  59.     public static void bulidCache() {  
  60.         // set(key,value,Date) ,Date是一个过期时间,如果想让这个过期时间生效的话,这里传递的new Date(long  
  61.         // date) 中参数date,需要是个大于或等于1000的值。  
  62.         // 因为java client的实现源码里是这样实现的 expiry.getTime() / 1000 ,也就是说,如果  
  63.         // 小于1000的值,除以1000以后都是0,即永不过期  
  64.         mcc.set("test""This is a test String"new Date(10000));  
  65.         // 十秒后过期  
  66.   
  67.     }  
  68.   
  69.     public static void output() {  
  70.         // 从cache里取值  
  71.         String value = (String) mcc.get("test");  
  72.         System.out.println(value);  
  73.     }  
  74.   
  75.     public static void main(String[] args) {  
  76.         bulidCache(); //第一次运行后,注释掉该行,在设定10秒内仍可取到值,过期后值为null  
  77.         output();  
  78.     }  
  79.   
  80. }  
0 0
原创粉丝点击