[App] Memcached 基本安装与使用

转自 http://soysauce93.blog.51cto.com/7589461/1737161

 

 

MemCache的工作流程如下:先检查客户端的请求数据是否在memcached中,如有,直接把请求数据返回,不再对数据库进行任何操作;如果请求的数据不在memcached中,就去查数据库,把从数据库中获取的数据返回给客户端,同时把数据缓存一份到memcached中(memcached客户端不负责,需要程序明确实现);每次更新数据库的同时更新memcached中的数据,保证一致性;当分配给memcached内存空间用完之后,会使用LRULeast RecentlyUsed,最近最少使用)策略加上到期失效策略,失效数据首先被替换,然后再替换掉最近未使用的数据。[2]

Memcache是一个高性能的分布式的内存对象缓存系统,通过在内存里维护一个统一的巨大的hash表,它能够用来存储各种格式的数据,包括图像、视频、文件以及数据库检索的结果等。简单的说就是将数据调用到内存中,然后从内存中读取,从而大大提高读取速度。

 

 

什么是Memcached

Memcached是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提供动态、数据库驱动网站的速度。

Memcached基于一个存储键/值对的HashMap,它并不提供冗余(复制其HashMap条目),当某个服务器停止运行或崩溃了,所有存放在服务器上的键/值对都将丢失。但目前Memcached的客户端和代理程序可以提供多服务器的并联方式,可以提供一定的处理能力。

Memcached与其他分布式缓存的区别

Memcached与其它常用的分布式缓存(例如EhCache、OSCache、JBossCache)最主要的区别在于Memcached采用集中式缓存方式(即一台或多台缓存服务器为所有应用系统提供缓存能力),自身不提供集群能力,不提供缓存复制功能;而其他分布式缓存系统采用分布式缓存方式,各个应用系统内部提供数据缓存的能力,多个缓存间采用组播或点对点的方式进行缓存同步。

在性能上来看,Memcached比其它分布式缓存系统低一半以上(未考虑大量数据在其它缓存系统进行复制的影响);但从管理方面来看,Memcached的缓存采用集中管理的模式,应用系统可以水平扩展,而其它分布式缓存在水平扩展的同时,必须同时调整缓存复制策略,一旦应用服务器节点大量扩展,对于缓存服务器间的数据复制将成几何数增加。

 

来自 <http://tim-fly.iteye.com/blog/1756936>

 

 

1、安装

# yum -y install libevent libevent-devel gcc

# wget http://memcached.org/files/memcached-1.5.0.tar.gz

# tar -zxvf memcached-1.5.0.tar.gz

# cd memcached-1.5.0/

# ./configure --with-libevent=/usr/

# make && make install

 

# 启动memcached

# /usr/local/bin/memcached -d -m 128 -l 192.168.1.207 -p 11211 -u root

-d   表示启动一个守护进程

-m 是分配给memcached使用的内存

-u   运行memcached的用户

-l     是memcached监听的ip

-p    是memcached监听的端口

-c    memcache运行的最大并发连接数

-P    是设置memcache的pid文件

 

2、基本用法

1、启动Memcache常用参数

转自 http://blog.csdn.net/dailywater/article/details/50783636


-p<num>      设置TCP端口号(默认设置为:11211)
-U <num>      UDP监听端口(默认: 11211, 0时关闭)
-l <ip_addr>  绑定地址(默认:所有都允许,无论内外网或者本机更换IP,有安全隐患,若设置为127.0.0.1就只能本机访问)

-c<num>      max simultaneous connections(default: 1024)
-d            以daemon方式运行
-u <username> 绑定使用指定用于运行进程<username>
-m <num>      允许最大内存用量,单位M (默认: 64MB)
-P <file>    将PID写入文件<file>,这样可以使得后边进行快速进程终止, 需要与-d 一起使用


 


更多可以使用者memcached -h

在linux下:./usr/local/bin/memcached-d -u root  -l 192.168.1.197 -m 2048 -p12121
在window下:d:\App_Serv\memcached\memcached.exe -d RunService -l 127.0.0.1 -p11211 -m 500
在windows**册为服务后运行:
sc.exe create Memcached_srv binpath= “d:\App_Serv\memcached\memcached.exe -dRunService -p 11211 -m 500″start= auto
net start Memcached


2、连接和退出

telnet127.0.0.1 11211
quit

3、基本命令

五种基本 memcached命令执行最简单的操作。这些命令和操作包括:

set
add
replace
get
delete

前三个命令是用于操作存储在 memcached中的键值对的标准修改命令。它们都非常简单易用,且都使用如下 所示的语法:


command<key> <flags> <expiration time><bytes>
<value>

参数说明如下:
command set/add/replace
key     key 用于查找缓存值
flags    可以包括键值对的整型参数,客户机使用它存储关于键值对的额外信息
expiration time     在缓存中保存键值对的时间长度(以秒为单位,0表示永远)
bytes     在缓存中存储的字节点
value     存储的值(始终位于第二行)


现在,我们来看看这些命令的实际使用。

3.1set

set命令用于向缓存添加新的键值对。如果键已经存在,则之前的值将被替换。

注意以下交互,它使用了 set 命令:

set userId 0 05
12345
STORED

如果使用 set 命令正确设定了键值对,服务器将使用单词STORED 进行响应。本示例向缓存中添加了一个键值对,其键为userId,其值为12345。并将过期时间设置为 0,这将向 memcached通知您希望将此值存储在缓存中直到删除它为止。

3.2add

仅当缓存中不存在键时,add命令才会向缓存中添加一个键值对。如果缓存中已经存在键,则之前的值将仍然保持相同,并且您将获得响应 NOT_STORED。

下面是使用 add 命令的标准交互:


set userId 0 05
12345
STORED
add userId 0 0 5
55555
NOT_STORED
add companyId 0 0 3
564
STORED


3.3replace

仅当键已经存在时,replace命令才会替换缓存中的键。如果缓存中不存在键,那么您将从 memcached 服务器接受到一条 NOT_STORED 响应。

下面是使用 replace 命令的标准交互:


replaceaccountId 0 0 5
67890
NOT_STORED
set accountId 0 0 5
67890
STORED
replace accountId 0 0 5
55555
STORED


最后两个基本命令是 get 和delete。这些命令相当容易理解,并且使用了类似的语法,如下所示:

command<key>

接下来看这些命令的应用。

3.4get

get 命令用于检索与之前添加的键值对相关的值。您将使用get 执行大多数检索操作。

下面是使用 get 命令的典型交互:


set userId 0 05
12345
STORED
get userId
VALUE userId 0 5
12345
END
get bob
END


如您所见,get 命令相当简单。您使用一个键来调用get,如果这个键存在于缓存中,则返回相应的值。如果不存在,则不返回任何内容。

3.5delete

最后一个基本命令是 delete。delete 命令用于删除memcached 中的任何现有值。您将使用一个键调用delete,如果该键存在于缓存中,则删除该值。如果不存在,则返回一条NOT_FOUND 消息。

下面是使用 delete 命令的客户机服务器交互:


set userId 0 05
98765
STORED
delete bob
NOT_FOUND
delete userId
DELETED
get userId
END


可以在 memcached 中使用的两个高级命令是 gets和 cas。gets 和cas 命令需要结合使用。您将使用这两个命令来确保不会将现有的名称/值对设置为新值(如果该值已经更新过)。我们来分别看看这些命令。

3.6gets

gets 命令的功能类似于基本的 get命令。两个命令之间的差异在于,gets 返回的信息稍微多一些:64 位的整型值非常像名称/值对的 “版本” 标识符。

下面是使用 gets 命令的客户机服务器交互:


set userId 0 05
12345
STORED
get userId
VALUE userId 0 5
12345
END
gets userId
VALUE userId 0 5 4
12345
END


考虑 get 和 gets 命令之间的差异。gets命令将返回一个额外的值 — 在本例中是整型值 4,用于标识名称/值对。如果对此名称/值对执行另一个set 命令,则gets返回的额外值将会发生更改,以表明名称/值对已经被更新。显示了一个例子:


set userId 0 05
33333
STORED
gets userId
VALUE userId 0 5 5
33333
END


您看到 gets 返回的值了吗?它已经更新为5。您每次修改名称/值对时,该值都会发生更改。

3.7cas

cas(check 和 set)是一个非常便捷的memcached 命令,用于设置名称/值对的值(如果该名称/值对在您上次执行 gets 后没有更新过)。它使用与 set命令相类似的语法,但包括一个额外的值:gets 返回的额外值。

注意以下使用 cas 命令的交互:


set userId 0 05
55555
STORED
gets userId
VALUE userId 0 5 6
55555
END
cas userId 0 0 5 6
33333
STORED


如您所见,我使用额外的整型值 6 来调用 gets命令,并且操作运行非常顺序。现在,我们来看看中的一系列命令:

使用旧版本指示符的 cas 命令


set userId 0 05
55555
STORED
gets userId
VALUE userId 0 5 8
55555
END
cas userId 0 0 5 6
33333
EXISTS


注意,我并未使用 gets 最近返回的整型值,并且 cas命令返回 EXISTS 值以示失败。从本质上说,同时使用gets 和cas 命令可以防止您使用自上次读取后经过更新的名称/值对。

 

缓存管理命令

最后两个 memcached 命令用于监控和清理memcached 实例。它们是 stats 和 flush_all 命令。

3.8stats

stats 命令的功能正如其名:转储所连接的 memcached 实例的当前统计数据。在下例中,执行stats 命令显示了关于当前 memcached 实例的信息:


STAT pid22459                            进程ID
STAT uptime 1027046                       服务器运行秒数
STAT time 1273043062                      服务器当前unix时间戳
STAT version 1.4.4                        服务器版本
STAT libevent 2.0.21-stable
STAT pointer_size 64                      操作系统字大小(这台服务器是64位的)
STAT rusage_user 0.040000                 进程累计用户时间
STAT rusage_system 0.260000               进程累计系统时间
STAT curr_connections 10                  当前打开连接数
STAT total_connections 82                 曾打开的连接总数
STAT connection_structures 13             服务器分配的连接结构数
STAT reserved_fds 20
STAT cmd_get 54                           执行get命令总数
STAT cmd_set 34                           执行set命令总数
STAT cmd_flush 3                          指向flush_all命令总数
STAT get_hits 9                           get命中次数
STAT get_misses 45                        get未命中次数
STAT delete_misses 5                      delete未命中次数
STAT delete_hits 1                        delete命中次数
STAT incr_misses 0                        incr未命中次数
STAT incr_hits 0                          incr命中次数
STAT decr_misses 0                        decr未命中次数
STAT decr_hits 0                          decr命中次数
STAT cas_misses 0                         cas未命中次数
STAT cas_hits 0                           cas命中次数
STAT cas_badval 0                         使用擦拭次数
STAT touch_hits 0
STAT touch_misses 0
STAT auth_cmds 0
STAT auth_errors 0
STAT bytes_read 15785                     读取字节总数
STAT bytes_written 15222                  写入字节总数
STAT limit_maxbytes 67108864              分配的内存数(字节)
STAT accepting_conns 1                    目前接受的链接数
STAT listen_disabled_num 0               
STAT time_in_listen_disabled_us 0
STAT threads 4                            线程数
STAT conn_yields 0
STAT hash_power_level 16
STAT hash_bytes 524288
STAT hash_is_expanding 0
STAT malloc_fails 0
STAT conn_yields 0
STAT bytes 0                              存储item字节数
STAT curr_items 0                         item个数
STAT total_items 34                       item总数
STAT expired_unfetched 0
STAT evicted_unfetched 0
STAT evictions 0                          为获取空间删除item的总数
STAT reclaimed 0
STAT crawler_reclaimed 0
STAT crawler_items_checked 0
STAT lrutail_reflocked 0


此处的大多数输出都非常容易理解。我们先来看看输出,然后再使用新的键来运行一些set 命令,并再次运行stats 命令,注意发生了哪些变化。

stats items

执行stats items,可以看到STATitems行,如果memcached存储内容很多,那么这里也会列出很多的STAT items行。


STATitems:1:number 3
STAT items:1:age 1698
STAT items:1:evicted 0
STAT items:1:evicted_nonzero 0
STAT items:1:evicted_time 0
STAT items:1:outofmemory 0
STAT items:1:tailrepairs 0
STAT items:1:reclaimed 0
STAT items:1:expired_unfetched 0
STAT items:1:evicted_unfetched 0
STAT items:1:crawler_reclaimed 0
STAT items:1:crawler_items_checked 0
STAT items:1:lrutail_reflocked 0
END


statscachedump slabs_id limit_num

slabs_id:由stats items返回的结果(STATitems后面的数字)决定的

limit_num:返回的记录数,0表示返回所有记录

通过stats items、stats cachedumpslab_id limit_num配合get命令可以遍历memcached的记录。


stats cachedump1 0
ITEM userId [5 b; 1467903379 s]
ITEM accountId [5 b; 1467903379 s]
ITEM companyId [3 b; 1467903379 s]
END
stats cachedump 1 2
ITEM userId [5 b; 1467903379 s]
ITEM accountId [5 b; 1467903379 s]
END


stats slabs 显示各个slab的信息,包括chunk的大小、数目、使用情况等


STAT1:chunk_size 96
STAT 1:chunks_per_page 10922
STAT 1:total_pages 1
STAT 1:total_chunks 10922
STAT 1:used_chunks 3
STAT 1:free_chunks 10919
STAT 1:free_chunks_end 0
STAT 1:mem_requested 232
STAT 1:get_hits 9
STAT 1:cmd_set 14
STAT 1:delete_hits 1
STAT 1:incr_hits 0
STAT 1:decr_hits 0
STAT 1:cas_hits 0
STAT 1:cas_badval 0
STAT 1:touch_hits 0
STAT active_slabs 1
STAT total_malloced 1048512


stats sizes 输出所有item的大小和个数

STAT 96 3

stats reset 清空统计数据

statsreset
RESET

3.9flush_all

flush_all是最后一个要介绍的命令。这个最简单的命令仅用于清理缓存中的所有名称/值对。如果您需要将缓存重置到干净的状态,则 flush_all能提供很大的用处。下面是一个使用 flush_all 的例子:


set userId 0 05
55555
STORED
get userId
VALUE userId 0 5
55555
END
flush_all
OK
get userId
END


追加与清除命令

3.10append

append将数据追加到当前缓存数据的之后,当缓存数据存在时才存储。


set username 00 8
wayne173
STORED
get username
VALUE username 0 8
wayne173
END
append username 0 0 5
_ages
STORED
get username
VALUE username 0 13
wayne173_ages
END


3.11prepend

prepend将数据追加到当前缓存数据的之前,当缓存数据存在时才存储。


set username 00 8
wayne173
STORED
get username
VALUE username 0 8
wayne173
END
prepend username 0 0 5
name_
STORED
get username
VALUE username 0 13
name_wayne173
END


memcached还有很多命令,比如对于存储为数字型的可以通过incr/decr命令进行增减操作等等,这里只列出开发和运维中经常使用的命令,其他的不再一一举例说明。

 

附memcached常用命令列表


 

转自 <http://soysauce93.blog.51cto.com/7589461/1737161>

 

 [App] Memcached 基本安装与使用