redis 学习笔记.docx
《redis 学习笔记.docx》由会员分享,可在线阅读,更多相关《redis 学习笔记.docx(36页珍藏版)》请在冰豆网上搜索。
redis学习笔记
Redis
Linux为:
Centos5.4
1、安装
wget
tarzxvfredis-2.0.4.tar.gz
cdredis-2.0.4
make
make完后redis-2.0.4目录下会出现编译后的redis服务程序redis-server,还有用于测试的客户端程序redis-cli
安装成功
2、启动服务
./redis-server
也可以通过启动参数告诉redis使用指定配置文件使用下面命令启动
./redis-serverredis.conf
redis.conf是一个默认的配置文件。
我们可以根据需要使用自己的配置文件。
启动redis服务进程后,就可以使用测试客户端程序redis-cli和redis服务交互了
注意启动的时候,会出现
WARNINGovercommit_memoryissetto0!
Backgroundsavemayfailunder
lowmemorycondition.Tofixthisissueadd'vm.overcommit_memory=1'to/etc/sysctl.confand
[6020]10Aug20:
58:
21*Theserverisnowreadytoacceptconnectionsonport6379
[6020]10Aug20:
58:
21-0clientsconnected(0slaves),533432bytesinuse
[6020]10Aug20:
58:
30-0clientsconnected(0slaves),533432bytesinuse
由于默认配置是连接到本机的
这时候你要修改配置文件的ip地址连接你服务器啊(可以不绑定默认是127.0.0.1)
还有就是执行:
sysctlvm.overcommit_memory=1(每次启动的时候都要设置)
记得重启啊:
reboot
3、Set和get值
注意此步骤必须在你的解压目录啊
./redis-cli
然后出现:
redis>
Set值:
setkeyvalue如:
redis>setnameajun
OK
Get值:
getkey如:
redis>getname
"ajun"
一次set多个key和获得多个key
redis>msetk12k23
OK
redis>mgetk1k2
1."2"
2."3"
成功
4、对key的操作详细请参见:
5、数据类型参见:
6、排序
SORTkey[BYpattern][LIMITstartcount][GETpattern][ASC|DESC][ALPHA][STOREdstkey]
①这个是最简单的情况,没有任何选项就是简单的对集合自身元素排序并返回排序结果.下面给个例子
redis>lpushml12
(integer)1
redis>lpushml11
(integer)2
redis>lpushml23
(integer)3
redis>lpushml13
(integer)4
redis>sortml
1."11"
2."12"
3."13"
4."23"
(2)[ASC|DESC][ALPHA]
sort默认的排序方式(asc)是从小到大排的,当然也可以按照逆序或者按字符顺序排。
逆序可以加上desc选项,想按字母顺序排可以加alpha选项,当然alpha可以和desc一起用。
下面是个按字母顺序排的例子
redis>lpushmylistbaidu
(integer)1
redis>lpushmylisthello
(integer)2
redis>lpushmylistxhan
(integer)3
redis>lpushmylistsoso
(integer)4
redis>sortmylist
1."soso"
2."xhan"
3."hello"
4."baidu"
redis>sortmylistalpha
1."baidu"
2."hello"
3."soso"
4."xhan"
redis>sortmylistdescalpha
1."xhan"
2."soso"
3."hello"
4."baidu"
(3)[BYpattern]
除了可以按集合元素自身值排序外,还可以将集合元素内容按照给定pattern组合成新的key,并按照新key中对应的内容进行排序。
下面的例子接着使用第一个例子中的ml集合做演示:
redis>setname11nihao
OK
redis>setname12wo
OK
redis>setname13shi
OK
redis>setname23lala
OK
redis>sortmlbyname*
1."13"
2."23"
3."11"
4."12"
*代表了ml中的元素值,所以这个排序是按照name12name13name23name23这四个key对应值排序的,当然返回的还是排序后ml集合中的元素
(4)[GETpattern]
上面的例子都是返回的ml集合中的元素。
我们也可以通过get选项去获取指定pattern作为新key对应的值。
看个组合起来的例子
redis>sortmlbyname*getname* alpha
1."lala"
2."nihao"
3."shi"
4."wo"
这次返回的就不在是ml中的元素了,而是name12name13name23name23对应的值。
当然排序是按照name12name13name23name23值并根据字母顺序排的。
另外get选项可以有多个。
看例子(#特殊符号引用的是原始集合也就是ml)
redis>sortmlbyname*getname*get# alpha
1."lala"
2."23"
3."nihao"
4."11"
5."shi"
6."13"
7."wo"
8."12"
最后在还有一个引用hash类型字段的特殊字符->,下面是例子
redis>hsetuser1namehanjie
(integer)1
redis>hsetuser11namehanjie
(integer)1
redis>hsetuser12name86
(integer)1
redis>hsetuser13namelxl
(integer)1
redis>sortmlgetuser*->name
1."hanjie"
2."86"
3."lxl"
4.(nil)
很容易理解,注意当对应的user23不存在时候返回的是nil
(5)[LIMITstartcount]
上面例子返回结果都是全部。
limit选项可以限定返回结果的数量。
例子
redis>sortmlgetname*limit12
1."wo"
2."shi"
start下标是从0开始的,这里的limit选项意思是从第二个元素开始获取2个
(6)[STOREdstkey]
如果对集合经常按照固定的模式去排序,那么把排序结果缓存起来会减少不少cpu开销.使用store选项可以将排序内容保存到指定key中。
保存的类型是list
redis>sortmlgetname*limit12storecl
(integer)2
redis>typecl
list
redis>lrangecl0-1
1."wo"
2."shi
功能介绍完后,再讨论下关于排序的一些问题。
如果我们有多个redisserver的话,不同的key可能存在于不同的server上。
比如name12name13name23name23,很有可能分别在四个不同的server上存贮着。
这种情况会对排序性能造成很大的影响。
redis作者在他的blog上提到了这个问题的解决办法,就是通过keytag将需要排序的key都放到同一个server上。
由于具体决定哪个key存在哪个服务器上一般都是在client端hash的办法来做的。
我们可以通过只对key的部分进行hash.举个例子假如我们的client如果发现key中包含[]。
那么只对key中[]包含的内容进行hash。
我们将四个name相关的key,都这样命名[name]12[name]13[name]23[name]23,于是client程序就会把他们都放到同一server上。
不知道jredis实现了没。
还有一个问题也比较严重。
如果要sort的集合非常大的话排序就会消耗很长时间。
由于redis单线程的,所以长时间的排序操作会阻塞其他client的请求。
解决办法是通过主从复制机制将数据复制到多个slave上。
然后我们只在slave上做排序操作。
并进可能的对排序结果缓存。
另外就是一个方案是就是采用sortedset对需要按某个顺序访问的集合建立索引。
7、Redis事物
五redis-------pipeline
-----网上资料
CentOS下Redis2.2安装配置详解
2011-07-2712:
25
一.关于Redis
Redis是一种高级key-value数据库。
它跟memcached类似,不过数据可以持久化,而且支持的数据类型很丰富。
它在保持键值数据库简单快捷特点的同时,又吸收了部分关系数据库的优点。
从而使它的位置处于关系数据库和键值数据库之间。
Redis不仅能保存Strings类型的数据,还能保存Lists类型(有序)和Sets类型(无序)的数据,而且还能完成排序(SORT)等高级功能,在实现INCR,SETNX等功能的时候,保证了其操作的原子性,除此以外,还支持主从复制等功能。
Redis可以被看成是一个数据结构服务器。
Redis的所有数据都是保存在内存中,然后不定期的通过异步方式保存到磁盘上(这称为“半持久化模式”);也可以把每一次数据变化都写入到一个appendonlyfile(aof)里面(这称为“全持久化模式”)。
官方网站:
http:
//redis.io/
PPT介绍:
二.安装Redis
Redis的代码遵循ANSI-C编写,可以在所有POSIX系统(如Linux,*BSD,MacOSX,Solaris等)上安装运行。
而且Redis并不依赖任何非标准库,也没有编译参数必需添加。
编译安装Redis,我们唯一需要的就是make。
1.下载redis最新版本2.2.12
cd/usr/local/src
wget
2.编译安装redis
tarzxvfredis-2.2.12.tar.gz
cdredis-2.2.12
make
make命令执行完成后,会在当前目录下生成4个可执行文件,分别是redis-server、redis-cli、redis-benchmark、redis-stat,它们的作用如下:
redis-server:
Redis服务器的daemon启动程序
redis-cli:
Redis命令行操作工具。
当然,你也可以用telnet根据其纯文本协议来操作
redis-benchmark:
Redis性能测试工具,测试Redis在你的系统及你的配置下的读写性能
redis-stat:
Redis状态检测工具,可以检测Redis当前状态参数及延迟状况
3.建立Redis目录(建议,非必需)
执行以下命令建立相关目录并拷贝相关文件至目录中:
sudo-s
mkdir-p/usr/local/redis/bin
mkdir-p/usr/local/redis/etc
mkdir-p/usr/local/redis/var
cpredis-serverredis-cliredis-benchmarkredis-stat/usr/local/redis/bin/
cpredis.conf/usr/local/redis/etc/
建立Redis目录,只是为了将Redis相关的资源更好的统一管理。
你也可以使用
makeinstall
安装在系统默认目录
三.配置Redis
成功安装Redis后,直接执行redis-server即可运行Redis,此时它是按照默认配置来运行的(默认配置不是后台运行)。
如果我们希望Redis按我们的要求运行,则需要修改配置文件,Redis的配置文件就是上面第二个cp操作的redis.conf文件,目前它被我们拷贝到了/usr/local/redis/etc/目录下。
修改它就可以配置redisserver了。
1. redis.conf配置参数:
#是否作为守护进程运行
daemonizeyes
#如以后台进程运行,则需指定一个pid,默认为/var/run/redis.pid
pidfileredis.pid
#绑定主机IP,默认值为127.0.0.1
#bind127.0.0.1
#Redis默认监听端口
port6379
#客户端闲置多少秒后,断开连接,默认为300(秒)
timeout300
#日志记录等级,有4个可选值,debug,verbose(默认值),notice,warning
loglevelverbose
#指定日志输出的文件名,默认值为stdout,也可设为/dev/null屏蔽日志
logfilestdout
#可用数据库数,默认值为16,默认数据库为0
databases16
#保存数据到disk的策略
#当有一条Keys数据被改变是,900秒刷新到disk一次
save9001
#当有10条Keys数据被改变时,300秒刷新到disk一次
save30010
#当有1w条keys数据被改变时,60秒刷新到disk一次
save6010000
#当dump.rdb数据库的时候是否压缩数据对象
rdbcompressionyes
#本地数据库文件名,默认值为dump.rdb
dbfilenamedump.rdb
#本地数据库存放路径,默认值为./
dir/usr/local/redis/var/
########### Replication#####################
#Redis的复制配置
#slaveof当本机为从服务时,设置主服务的IP及端口
#masterauth当本机为从服务时,设置主服务的连接密码
#连接密码
#requirepassfoobared
#最大客户端连接数,默认不限制
#maxclients128
#最大内存使用设置,达到最大内存设置后,Redis会先尝试清除已到期或即将到期的Key,当此方法处理后,任到达最大内存设置,将无法再进行写入操作。
#maxmemory
#是否在每次更新操作后进行日志记录,如果不开启,可能会在断电时导致一段时间内的数据丢失。
因为redis本身同步数据文件是按上面save条件来同步的,所以有的数据会在一段时间内只存在于内存中。
默认值为no
appendonlyno
#更新日志文件名,默认值为appendonly.aof
#appendfilename
#更新日志条件,共有3个可选值。
no表示等操作系统进行数据缓存同步到磁盘,always表示每次更新操作后手动调用fsync()将数据写到磁盘,everysec表示每秒同步一次(默认值)。
#appendfsyncalways
appendfsynceverysec
#appendfsyncno
################VIRTUALMEMORY###########
#是否开启VM功能,默认值为no
vm-enabledno
#vm-enabledyes
#虚拟内存文件路径,默认值为/tmp/redis.swap,不可多个Redis实例共享
vm-swap-filelogs/redis.swap
#将所有大于vm-max-memory的数据存入虚拟内存,无论vm-max-memory设置多小,所有索引数据都是内存存储的(Redis的索引数据就是keys),也就是说,当vm-max-memory设置为0的时候,其实是所有value都存在于磁盘。
默认值为0。
vm-max-memory0
vm-page-size32
vm-pages134217728
vm-max-threads4
#############ADVANCEDCONFIG###############
glueoutputbufyes
hash-max-zipmap-entries64
hash-max-zipmap-value512
#是否重置Hash表
activerehashingyes
注意:
Redis官方文档对VM的使用提出了一些建议:
**当你的key很小而value很大时,使用VM的效果会比较好.因为这样节约的内存比较大.
**当你的key不小时,可以考虑使用一些非常方法将很大的key变成很大的value,比如你可以考虑将key,value组合成一个新的value.
**最好使用linuxext3等对稀疏文件支持比较好的文件系统保存你的swap文件.
**vm-max-threads这个参数,可以设置访问swap文件的线程数,设置最好不要超过机器的核数.如果设置为0,那么所有对swap文件的操作都是串行的.可能会造成比较长时间的延迟,但是对数据完整性有很好的保证.
2.调整系统内核参数
如果内存情况比较紧张的话,需要设定内核参数:
echo1>/proc/sys/vm/overcommit_memory
这里说一下这个配置的含义:
/proc/sys/vm/overcommit_memory
该文件指定了内核针对内存分配的策略,其值可以是0、1、2。
0,表示内核将检查是否有足够的可用内存供应用进程使用;如果有足够的可用内存,内存申请允许;否则,内存申请失败,并把错误返回给应用进程。
1,表示内核允许分配所有的物理内存,而不管当前的内存状态如何。
2,表示内核允许分配超过所有物理内存和交换空间总和的内存
Redis在dump数据的时候,会fork出一个子进程,理论上child进程所占用的内存和parent是一样的,比如parent占用的内存为8G,这个时候也要同样分配8G的内存给child,如果内存无法负担,往往会造成redis服务器的down机或者IO负载过高,效率下降。
所以这里比较优化的内存分配策略应该设置为1(表示内核允许分配所有的物理内存,而不管当前的内存状态如何)
四.运行Redis
1.运行服务
/usr/local/redis/bin/redis-server/usr/local/redis/etc/redis.conf
即可在后台启动redis服务,确认运行了之后,可以用redis-benchmark命令测试看看,还可以通过redis-cli命令实际操作一下,比如:
/usr/local/redis/bin/redis-clisetfoobar
OK
/usr/local/redis/bin/redis-cligetfoo
bar
2.关闭服务
redis-clishutdown
如果端口变化可以指定端口:
redis-cli-p6380shutdown
3.保存/备份
数据备份可以通过定期备份该文件实现。
因为redis是异步写入磁盘的,如果要让内存中的数据马上写入硬盘可以执行如下命令:
redis-clisave或者redis-cli-p6380save(指定端口)
注意,以上部署操作需要具备一定的权限,比如复制和设定内核参数等。
执行redis-benchmark命令时也会将内存数据写入硬盘。
4.同步机制
redis实现的同步机制相对简单,缺少同步机制常见的checkpoint和校验机制。
在运行时,如果master->slave同步请求转发被丢弃,slave将无法恢复该请求的相关信息,直到slave重启时从master全量加载数据时才能修复。
因此,建议使用redis尽量利用其key/value和value支持多种类型的特性,存储一些相对不重要的数据。
后台启动redis服务,这时你通过
telnet127.0.0.16379
即可连接到你的redis服务。
启动服务器
./redis-server
或
$redis-server /etc/redis.conf
查看是否成功启动
$ ps -ef | grep redis
或
./redis-cli ping
网上资料
1.Redis可存储的数据类型
1.1.keys
redis本质上一个key-valuedb,所以我们首先来看看他的key.首先key也是字符串类型,但是key中不能包括边界字符由于key不是binarysafe的字符串,所以像"mykey"和"mykey\n"这样包含空格和换行的key是不允许的顺便说一下在redis内部并不限制使用binary字符,这是redis协议限制的。
"\r\n"在协议格式中会作为特殊字符。
redis1.2以后的协议中部分命令已经开始使用新的协议格式了(比如MSET)。
总之目前还是把包含边界字符当成非法的key吧,免得被bug纠缠。
另外关于key的一个格式约定介