memcached了解使用和常用命令详解

来源:互联网 发布:显示器颜色校准软件 编辑:程序博客网 时间:2024/06/12 19:07


官网地址:http://memcached.org/


Memcached是什么?

  Memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提供动态、数据库驱动网站的速度。Memcached基于一个存储键/值对的hashmap。其守护进程(daemon )是用C写的,但是客户端可以用任何语言来编写,并通过memcached协议与守护进程通信。但是它并不提供冗余(例如,复制其hashmap条目);当某个服务器S停止运行或崩溃了,所有存放在S上的键/值对都将丢失。

  Memcached由Danga Interactive开发,其最新版本发布于2010年,作者为Anatoly Vorobey和Brad Fitzpatrick。用于提升LiveJournal . com访问速度的。LJ每秒动态页面访问量几千次,用户700万。Memcached将数据库负载大幅度降低,更好的分配资源,更快速访问。

 

如何使用memcached-Server端?

 

  在服务端运行:

  # ./memcached -d -m 2048 -l 10.0.0.40 -p 11211

  这将会启动一个占用2G内存的进程,并打开11211端口用于接收请求。由于32位系统只能处理4G内存的寻址,所以在大于4G内存使用PAE的32位服务器上可以运行2-3个进程,并在不同端口进行监听。


启动/结束
memcached -d -m 10 -u root -l 192.168.0.122 -p 11200 -c 256 -P /tmp/memcached.pid
-d 选项是启动一个守护进程, 
-m 是分配给Memcache使用的内存数量,单位是MB,这里是10MB
-u 是运行Memcache的用户,这里是root
-l 是监听的服务器IP地址,如果有多个地址的话,这里指定了服务器的IP地址192.168.0.122 
-p 是设置Memcache监听的端口,这里设置了12000,最好是1024以上的端口
-c 选项是最大运行的并发连接数,默认是1024,这里设置了256,按照你服务器的负载量来设定
-P 是设置保存Memcache的pid文件
kill `cat /tmp/memcached.pid`

获取运行状态
echo stats | nc 192.168.1.123 11200
watch "echo stats | nc 192.168.1.123 11200" (实时状态) 



如何使用memcached-Client端?
 

  在应用端包含一个用于描述Client的Class后,就可以直接使用,非常简单。

 

  PHP Example:

  $options["servers"] = array("192.168.1.41:11211", "192.168.1.42:11212");

  $options["debug"] = false;

  $memc = new MemCachedClient($options);

 

  $myarr = array("one","two", 3);

  $memc->set("key_one", $myarr);

  $val = $memc->get("key_one");

  print $val[0]."\n"; // prints 'one‘

  print $val[1]."\n"; // prints 'two‘

  print $val[2]."\n"; // prints 3


一个用PHP编写的可视化的MemCached管理系统


  MemAdmin是一款可视化的Memcached管理与监控工具,使用PHP开发,体积小,操作简单。

 

  主要功能:

 

  服务器参数监控:STATS、SETTINGS、ITEMS、SLABS、SIZES实时刷新

 

  服务器性能监控:GET、DELETE、INCR、DECR、CAS等常用操作命中率实时监控

 

  支持数据遍历,方便对存储内容进行监视

 

  支持条件查询,筛选出满足条件的KEY或VALUE

 

  数组、JSON等序列化字符反序列显示

 

  兼容memcache协议的其他服务,如Tokyo Tyrant (遍历功能除外)

 

  支持服务器连接池,多服务器管理切换方便简洁

摘自http://baike.baidu.com/view/794242.htm

 

Memcache是什么?

Memcache是一个自由和开放源代码、高性能、分配的内存对象缓存系统。用于加速动态web应用程序,减轻数据库负载。

它可以应对任意多个连接,使用非阻塞的网络IO。由于它的工作机制是在内存中开辟一块空间,然后建立一个HashTable,Memcached自管理这 些HashTable。

Memcached又是什么?

Memcached是Memcache系统的主程序文件,以守护程序方式运行于一个或多个服务器中,随时接受客 户端的连接操作,使用共享内存存取数据。

那PHP中的Memcache是什么?php中的所讲的memcache是用于连接Memecached的php支持扩展之一(可用phpinfo查看),类似mbstring,eAccelerator。


简单的说

Memcache是总的缓存系统项目名称,容易和PHP中的Memcache混淆。

我们常提到Memcache其实是PHP中的Memcache,即PHP的Memcached扩展支持。

我们常提到Memcached是服务端主程序文件,服务端安装程序。

为了让你的程序飞起来,必须安装memcached服务端程序和PHP的Memcached扩展,所以如果您要使用Memcache来缓存系统,memcache和memcached两样我们都需要安装。

安装memcache

# cd /usr/local/src
# wget http://pecl.php.net/get/memcache-2.2.5.tgz
# gzip -d memcache-2.2.5.tgz
# tar xvf memcache-2.2.5.tar
# cd memcache-2.2.5

以下几句,是以php所在目录为/usr/local/php为例,如果您的php有变化,请自行替换几句中/usr/local/php的部分

# /usr/local/php/bin/phpize
# ./configure --enable-memcache --with-php-config=/usr/local/php/bin/php-config --with-zlib-dir
# make && make install

将memcache加入php扩展

# vi /etc/php.ini(/etc/php.ini地址为我的php.ini位置,如果你不知道你的php.ini在哪里,可以用# find / -name php.ini进行查找,或者传个探针phpinfo,找到Configuration File (php.ini) Path)中php.ini的位置.

末尾加入

按键盘上的 i 开始编辑

CTRL+F翻页拉到最下面在[Zend]之前加入

extension_dir = "/usr/local/php/lib/php/extensions/no-debug-non-zts-20060613/"
extension=memcache.so

按Esc键,再输入

:wq

保存退出

重启你的web服务器,比如apache

/etc/init.d/httpd restart

下面刷新下PHP探针,看下是不是有这个了,有的话就是装好了

memcache
Version  2.2.5memcache
Version  2.2.5

下面安装memcached

装memcached首先需要安装安装libevent

如果是centos可以yum安装

# yum install libevent-devel

如果不支持yum的系统,可以这样装libevent

# cd /usr/local/src
# wget http://www.monkey.org/~provos/libevent-1.4.12-stable.tar.gz
# tar vxf libevent-1.4.12-stable.tar.gz
# cd libevent-1.4.12
# ./configure --prefix=/usr/local/libevent
# make && make install

接续安装memcached

# cd /usr/local/src
# wget http://cloud.github.com/downloads/saberma/saberma.github.com/memcached-1.4.4.tar.gz
# tar vxf memcached-1.4.4.tar.gz
# cd memcached-1.4.4
# ./configure --prefix=/usr/local/memcached
# make && make install

安装完后启动memcached并分配32m内存(32为使用内存数,可按自身情况修改)

/usr/local/memcached/bin/memcached -d -m 32 -l 127.0.0.1 -p 11211 -u root

将memcached加入启动项

# vi /etc/rc.d/rc.local

按键盘上的 i 开始编辑

在最后加入

/usr/local/memcached/bin/memcached -d -m 32 -l 127.0.0.1 -p 11211 -u root

按Esc键,再输入

:wq

保存退出

如果需要,可以reboot一下,不过不用reboot应该已经生效~

加速效果测试

用没有什么负载的Discuz X1做个测试,未启用时

GMT+8, 2010-9-12 09:08, Processed in 0.038893 second(s), 2 queries.

缓存启用后的效果,不过总体感觉VPS上效果不如用eAccelerato缓存加入效果那么明显

GMT+8, 2010-9-12 09:08, Processed in 0.008383 second(s), 2 queries, Memcache On.

摘自 http://www.chinaz.com/web/2010/0916/133310_2.shtml


如何将 memcached 融入到您的环境中?

在开始安装和使用 using memcached 之前,我们需要了解如何将 memcached 融入到您的环境中。虽然在任何地方都可以使用 memcached,但我发现需要在数据库层中执行几个经常性查询时,memcached 往往能发挥最大的效用。我经常会在数据库和应用服务器之间设置一系列 memcached 实例,并采用一种简单的模式来读取和写入这些服务器。图 1 可以帮助您了解如何设置应用程序体系结构:


图 1. 使用 memcached 的示例应用程序体系结构
使用 memcached 的示例应用程序体系结构

体系结构相当容易理解。我建立了一个 Web 层,其中包括一些 Apache 实例。下一层是应用程序本身。这一层通常运行于 Apache Tomcat 或其他开源应用服务器之上。再下面一层是配置 memcached 实例的地方 — 即应用服务器与数据库服务器之间。在使用这种配置时,需要采用稍微不同的方式来执行数据库的读取和写入操作。

读取

我执行读取操作的顺序是从 Web 层获取请求(需要执行一次数据库查询)并检查之前在缓存中存储的查询结果。如果我找到所需的值,则返回它。如果未找到,则执行查询并将结果存储在缓存中,然后再将结果返回给 Web 层。

写入

将数据写入到数据库中时,首先需要执行数据库写入操作,然后将之前缓存的任何受此写入操作影响的结果设定为无效。此过程有助于防止缓存和数据库之间出现数据不一致性。

安装 memcached

memcached 支持一些操作系统,包括 Linux®、Windows®、Mac OS 和 Solaris。在本文中,我将详细介绍如何通过源文件构建和安装 memcached。采用这种方式的主要原因是我在遇到问题时可以查看源代码。

libevent

libevent 是安装 memcached 的唯一前提条件。它是 memcached 所依赖的异步事件通知库。您可以在 monkey.org 上找到关于 libevent 的源文件。接下来,找到其最新版本的源文件。对于本文,我们使用稳定的 1.4.11 版本。获取了归档文件之后,将它解压到一个方便的位置,然后执行清单 1 中的命令:


清单 1. 生成和安装 libevent

cd libevent-1.4.11-stable/./configuremakemake install

 

memcached

从 Danga Interactive 获取 memcached 源文件,仍然选择最新的分发版。在撰写本文时,其最新版本是 1.4.0。将 tar.gz 解压到方便的位置,并执行清单 2 中的命令:


清单 2. 生成和安装 memcached

cd memcached-1.4.0/./configuremakemake install

 

完成这些步骤之后,您应该安装了一个 memcached 工作副本,并且可以使用它了。让我们进行简单介绍,然后使用它。

使用 memcached

要开始使用 memcached,您首先需要启动 memcached 服务器,然后使用 telnet 客户机连接到它。

要启动 memcached,执行清单 3 中的命令:


清单 3. 启动 memcached

./memcached -d -m 2048 -l 10.0.0.40 -p 11211

 

这会以守护程序的形式启动 memcached(-d),为其分配 2GB 内存(-m 2048),并指定监听 localhost,即端口 11211。您可以根据需要修改这些值,但以上设置足以完成本文中的练习。接下来,您需要连接到 memcached。您将使用一个简单的 telnet 客户机连接到 memcached 服务器。

大多数操作系统都提供了内置的 telnet 客户机,但如果您使用的是基于 Windows 的操作系统,则需要下载第三方客户机。我推荐使用 PuTTy

安装了 telnet 客户机之后,执行清单 4 中的命令:


清单 4. 连接到 memcached

telnet localhost 11211

 

如果一切正常,则应该得到一个 telnet 响应,它会指示 Connected to localhost(已经连接到 localhost)。如果未获得此响应,则应该返回之前的步骤并确保 libevent 和 memcached 的源文件都已成功生成。

您现现已经登录到 memcached 服务器。此后,您将能够通过一系列简单的命令来与 memcached 通信。9 个 memcached 客户端命令可以分为三类:

  • 基本
  • 高级
  • 管理

基本 memcached 客户机命令

您将使用五种基本 memcached 命令执行最简单的操作。这些命令和操作包括:

  • set
  • add
  • replace
  • get
  • delete

 

前三个命令是用于操作存储在 memcached 中的键值对的标准修改命令。它们都非常简单易用,且都使用清单 5 所示的语法:


清单 5. 修改命令语法

command <key> <flags> <expiration time> <bytes><value>

 

表 1 定义了 memcached 修改命令的参数和用法。


表 1. memcached 修改命令参数

参数用法keykey 用于查找缓存值flags可以包括键值对的整型参数,客户机使用它存储关于键值对的额外信息expiration time在缓存中保存键值对的时间长度(以秒为单位,0 表示永远)bytes在缓存中存储的字节点value存储的值(始终位于第二行)

 

现在,我们来看看这些命令的实际使用。

set 
set 命令用于向缓存添加新的键值对。如果键已经存在,则之前的值将被替换。

注意以下交互,它使用了 set 命令:

set userId 0 0 512345STORED

 

如果使用 set 命令正确设定了键值对,服务器将使用单词 STORED 进行响应。本示例向缓存中添加了一个键值对,其键为 userId,其值为 12345。并将过期时间设置为 0,这将向 memcached 通知您希望将此值存储在缓存中直到删除它为止。

add 
仅当缓存中不存在键时,add 命令才会向缓存中添加一个键值对。如果缓存中已经存在键,则之前的值将仍然保持相同,并且您将获得响应NOT_STORED

下面是使用 add 命令的标准交互:

set userId 0 0 512345STOREDadd userId 0 0 555555NOT_STOREDadd companyId 0 0 3564STORED

 

replace 
仅当键已经存在时,replace 命令才会替换缓存中的键。如果缓存中不存在键,那么您将从 memcached 服务器接受到一条 NOT_STORED 响应。

下面是使用 replace 命令的标准交互:

replace accountId 0 0 567890NOT_STOREDset accountId 0 0 567890STOREDreplace accountId 0 0 555555STORED

 

最后两个基本命令是 get 和 delete。这些命令相当容易理解,并且使用了类似的语法,如下所示:

command <key>

 

接下来看这些命令的应用。

get 
get 命令用于检索与之前添加的键值对相关的值。您将使用 get 执行大多数检索操作。

下面是使用 get 命令的典型交互:

set userId 0 0 512345STOREDget userIdVALUE userId 0 512345ENDget bobEND

如您所见,get 命令相当简单。您使用一个键来调用 get,如果这个键存在于缓存中,则返回相应的值。如果不存在,则不返回任何内容。


前后追加命令


1.append
 将数据追加到当前缓存数据的之后,当缓存数据存在时才存储。

[plain] view plaincopy
  1. set mykey 0 0 3  
  2. 123  
  3. STORED  
  4.   
  5. append mykey 0 0 3  
  6. 456  
  7. STORED  
  8.   
  9. get mykey  
  10. VALUE mykey 0 6  
  11. 123456  
  12. END  
  13.   
  14. append notexists 0 0 3  
  15. 456  
  16. NOT_STORED  

2.prepend 将数据追加到当前缓存数据的之前,当缓存数据存在时才存储。

[plain] view plaincopy
  1. set mykey 0 0 3  
  2. 123  
  3. STORED  
  4.   
  5. prepend mykey 0 0 3  
  6. 456  
  7. STORED  
  8.   
  9. get mykey  
  10. VALUE mykey 0 6  
  11. 456123  
  12. END  
  13.   
  14. prepend notexists 0 0 3  
  15. 456  
  16. NOT_STORED  

delete 
最后一个基本命令是 deletedelete 命令用于删除 memcached 中的任何现有值。您将使用一个键调用 delete,如果该键存在于缓存中,则删除该值。如果不存在,则返回一条 NOT_FOUND 消息。

下面是使用 delete 命令的客户机服务器交互:

set userId 0 0 598765STOREDdelete bobNOT_FOUNDdelete userIdDELETEDget userIdEND

 

高级 memcached 客户机命令

可以在 memcached 中使用的两个高级命令是 gets 和 casgets 和 cas 命令需要结合使用。您将使用这两个命令来确保不会将现有的名称/值对设置为新值(如果该值已经更新过)。我们来分别看看这些命令。

gets 
gets 命令的功能类似于基本的 get 命令。两个命令之间的差异在于,gets 返回的信息稍微多一些:64 位的整型值非常像名称/值对的 “版本” 标识符。

下面是使用 gets 命令的客户机服务器交互:

set userId 0 0 512345STOREDget userIdVALUE userId 0 512345ENDgets userIdVALUE userId 0 5 412345END

考虑 get 和 gets 命令之间的差异。gets 命令将返回一个额外的值 — 在本例中是整型值 4,用于标识名称/值对。如果对此名称/值对执行另一个 set命令,则 gets 返回的额外值将会发生更改,以表明名称/值对已经被更新。清单 6 显示了一个例子:


清单 6. set 更新版本指示符

set userId 0 0 533333STOREDgets userIdVALUE userId 0 5 533333END

您看到 gets 返回的值了吗?它已经更新为 5。您每次修改名称/值对时,该值都会发生更改。


cas 
cas(check 和 set)是一个非常便捷的 memcached 命令,用于设置名称/值对的值(如果该名称/值对在您上次执行 gets 后没有更新过)。它使用与set 命令相类似的语法,但包括一个额外的值:gets 返回的额外值。

注意以下使用 cas 命令的交互:

set userId 0 0 555555STOREDgets userIdVALUE userId 0 5 655555ENDcas userId 0 0 5 633333STORED

如您所见,我使用额外的整型值 6 来调用 gets 命令,并且操作运行非常顺序。现在,我们来看看清单 7 中的一系列命令:


清单 7. 使用旧版本指示符的 cas 命令

set userId 0 0 555555STOREDgets userIdVALUE userId 0 5 855555ENDcas userId 0 0 5 633333EXISTS

注意,我并未使用 gets 最近返回的整型值,并且 cas 命令返回 EXISTS 值以示失败。从本质上说,同时使用 gets 和 cas 命令可以防止您使用自上次读取后经过更新的名称/值对。


缓存管理命令

最后两个 memcached 命令用于监控和清理 memcached 实例。它们是 stats 和 flush_all 命令。

stats 
stats 命令的功能正如其名:转储所连接的 memcached 实例的当前统计数据。在下例中,执行 stats 命令显示了关于当前 memcached 实例的信息:

statsSTAT pid 63STAT uptime 101758STAT time 1248643186STAT version 1.4.11STAT pointer_size 32STAT rusage_user 1.177192STAT rusage_system 2.365370STAT curr_items 2STAT total_items 8STAT bytes 119STAT curr_connections 6STAT total_connections 7STAT connection_structures 7STAT cmd_get 12STAT cmd_set 12STAT get_hits 12STAT get_misses 0STAT evictions 0STAT bytes_read 471STAT bytes_written 535STAT limit_maxbytes 67108864STAT threads 4END

此处的大多数输出都非常容易理解。稍后在讨论缓存性能时,我还将详细解释这些值的含义。至于目前,我们先来看看输出,然后再使用新的键来运行一些 set 命令,并再次运行 stats 命令,注意发生了哪些变化。


flush_all 
flush_all 是最后一个要介绍的命令。这个最简单的命令仅用于清理缓存中的所有名称/值对。如果您需要将缓存重置到干净的状态,则 flush_all 能提供很大的用处。下面是一个使用 flush_all 的例子:

set userId 0 0 555555STOREDget userIdVALUE userId 0 555555ENDflush_allOKget userIdEND

 

缓存性能

在本文的最后,我将讨论如何使用高级 memcached 命令来确定缓存的性能。stats 命令用于调优缓存的使用。需要注意的两个最重要的统计数据是 et_hits 和 get_misses。这两个值分别指示找到名称/值对的次数(get_hits)和未找到名称/值对的次数(get_misses)。

结合这些值,我们可以确定缓存的利用率如何。初次启动缓存时,可以看到 get_misses 会自然地增加,但在经过一定的使用量之后,这些 get_misses 值应该会逐渐趋于平稳 — 这表示缓存主要用于常见的读取操作。如果您看到 get_misses 继续快速增加,而 get_hits 逐渐趋于平稳,则需要确定一下所缓存的内容是什么。您可能缓存了错误的内容。

确定缓存效率的另一种方法是查看缓存的命中率(hit ratio)。缓存命中率表示执行 get 的次数与错过 get 的次数的百分比。要确定这个百分比,需要再次运行 stats 命令,如清单 8 所示:


清单 8. 计算缓存命中率

statsSTAT pid 6825STAT uptime 540692STAT time 1249252262STAT version 1.2.6STAT pointer_size 32STAT rusage_user 0.056003STAT rusage_system 0.180011STAT curr_items 595STAT total_items 961STAT bytes 4587415STAT curr_connections 3STAT total_connections 22STAT connection_structures 4STAT cmd_get 2688STAT cmd_set 961STAT get_hits 1908STAT get_misses 780STAT evictions 0STAT bytes_read 5770762STAT bytes_written 7421373STAT limit_maxbytes 536870912STAT threads 1END

现在,用 get_hits 的数值除以 cmd_gets。在本例中,您的命中率大约是 71%。在理想情况下,您可能希望得到更高的百分比 — 比率越高越好。查看统计数据并不时测量它们可以很好地判定缓存策略的效率。

 

状态命令

1.stats 查看memcached运行状态

statsSTAT pid                     Memcached 进程ID STAT uptime                  Memcached 运行时间,单位:秒  STAT time                    Memcached 当前的UNIX时间  STAT version                 Memcached 的版本号  STAT rusage_user             该进程累计的用户时间,单位:秒  STAT rusage_system           该进程累计的系统时间,单位:秒  STAT curr_items              Memcached 当前存储的内容数量  STAT total_items             Memcached 启动以来存储过的内容总数  STAT bytes                   Memcached 当前存储内容所占用的字节数(*/1024/1024=mb)  STAT curr_connections        当前连接数量  STAT total_connections       Memcached 运行以来接受的连接总数  STAT connection_structures   Memcached 分配的连接结构的数量  STAT cmd_get                 查询请求总数  STAT cmd_set                 存储(添加/更新)请求总数  STAT get_hits                查询成功获取数据的总次数  STAT get_misses              查询成功未获取到数据的总次数  STAT bytes_read              Memcached 从网络读取到的总字节数  STAT bytes_written           Memcached 向网络发送的总字节数  STAT limit_maxbytes          Memcached 在存储时被允许使用的字节总数END


2.stats items

执行stats items,可以看到STAT items行,如果memcached存储内容很多,那么这里也会列出很多的STAT items行。


3.stats cachedump slabs_id limit_num

slabs_id:由stats items返回的结果(STAT items后面的数字)决定的
limit_num:返回的记录数,0表示返回所有记录
通过stats items、stats cachedump slab_id limit_num配合get命令可以遍历memcached的记录。

[plain] view plaincopy
  1. stats cachedump 1 0  
  2. ITEM mykey [3 b; 1362880145 s]  
  3. END  


4.stats slabs
 显示各个slab的信息,包括chunk的大小、数目、使用情况等


5.stats sizes
 输出所有item的大小和个数


6.stats reset
 清空统计数据


摘自 http://www.cnblogs.com/czh-liyu/archive/2010/04/27/1722084.html


0 0
原创粉丝点击