python(十一)下：Redis安装配置及使用详解
目录
redis-py 的API的使用可以分类为：
- 连接方式
- 连接池
- 操作
- String 操作
- Hash 操作
- List 操作
- Set 操作
- Sort Set 操作
- 管道
- 发布订阅
两个程序通信，除了socket就是文件了，但是通过磁盘效率太低了，之前的RabbitMQ只是实现了消息的传递，现在要是实现数据的共享，可以通过缓存实现，一个中间商broker。
那其他程序也不能访问中间商的内存的，其他程序和中间商的通信也是通过socket实现。
主流缓存系统
mongodb 直接持久化
redis 半持久化
memcache 只能在内存，轻量级缓存
一、Redis简介
redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括string(字符串)、list(链表)、set(集合)、zset(sorted set –有序集合)和hash（哈希类型）。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。在此基础上，redis支持各种不同方式的排序。与memcached一样，为了保证效率，数据都是缓存在内存中。区别的是redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件，并且在此基础上实现了master-slave(主从)同步。
1、Redis安装和基本使用
Redis 和 python操作模块 安装 及 启动
yum install redis
pip3 install Redis
systemctl start redis.service查看版本：
redis-cli info # redis详细信息
redis-cli --version | redis-cli -v
redis-server --version | redis-server -v简单使用：
[root@localhost ~]# redis-cli # 进入redis cli窗口
127.0.0.1:6379> set name fgf # 设置值
OK
127.0.0.1:6379> set age 02
OK
127.0.0.1:6379> keys * # 当前所有key
1) "age"
2) "name"
127.0.0.1:6379> set sex m ex 2 # 设置值，只存活2秒
OK
127.0.0.1:6379> get sex # 获取值
"m"
127.0.0.1:6379> flushdb # 清空当前db下的所有键值
OK
127.0.0.1:6379> flushall # 清空所有db下的键值
OK2、Python操作Redis
1）操作模式
redis-py提供两个类Redis和StrictRedis用于实现Redis的命令，StrictRedis用于实现大部分官方的命令，并使用官方的语法和命令，Redis是StrictRedis的子类，用于向后兼容旧版本的redis-py。
import redis
r = redis.Redis(host='127.0.0.1', port=6379)
r.set('foo', 'Bar')
print (r.get('foo'))2）连接池
redis-py使用connection pool来管理对一个redis server的所有连接，避免每次建立、释放连接的开销。默认，每个Redis实例都会维护一个自己的连接池。可以直接建立一个连接池，然后作为参数Redis，这样就可以实现多个Redis实例共享一个连接池。
import redis
pool = redis.ConnectionPool(host='127.0.0.1', port=6379)
r = redis.Redis(connection_pool=pool)
r.set('foo', 'Bar')
print r.get('foo')二、Redis 操作
1、string操作
- set(name, value, ex=None, px=None, nx=False, xx=False)
help set
在Redis中设置值，默认，不存在则创建，存在则修改
参数：
ex，过期时间（秒）
px，过期时间（毫秒）
nx，如果设置为True，则只有name不存在时，当前set操作才执行
xx，如果设置为True，则只有name存在时，当前set操作才执行setnx 、 setex 、 psetex
mset(*args, **kwargs)
批量设置值
如：
mset n1 fgf a1 02- mget(keys, *args)
批量获取
如：
mget a1 n1- getset(name, value)
设置新值并获取原来的值
127.0.0.1:6379> getset a1 07- getrange(key, start, end)
获取子序列（根据字节获取，非字符）
参数：
name，Redis 的 name
start，起始位置（字节）
end，结束位置（字节）
> 127.0.0.1:6379> getrange n1 1 2
> "gf"
如： "中国人" ，3~5表示 "国"- setrange(name, offset, value)
# 修改字符串内容，从指定字符串索引开始向后替换（新值太长时，则向后添加）
# 参数：
# offset，字符串的索引，字节（一个汉字三个字节）
# value，要设置的值
127.0.0.1:6379> setrange n1 1 zh
127.0.0.1:6379> get n1
"fzh"- setbit(name, offset, value)
# 对name对应值的二进制进行位操作。参数：
# name，redis的name
# offset，位的索引（将值变换成二进制后再进行索引）
# value，值只能是 1 或 0
127.0.0.1:6379> set name abcd # 我们对值内a进行修改
OK
127.0.0.1:6379> setbit name 6 1
(integer) 0
127.0.0.1:6379> get name
"cbcd" # 改b的话，从第8位开始数
----------------------------------
>>> ord('a')
97
>>> bin(97) # 把a改成c，97 ——> 99
'0b1100001' # 0110 0001 ——> 0110 0011 （第六位改为1）- bitcount(key, start=None, end=None)
# 获取name对应的值的二进制表示中 1 的个数
127.0.0.1:6379> set n a # a ——> 0110 0001
OK
127.0.0.1:6379> bitcount n # 3个1
(integer) 3
127.0.0.1:6379> setbit n 10 1 # 虽然a一个字节只有8位，但是这里没有限制。
(integer) 0
127.0.0.1:6379> setbit n 11 1
(integer) 0
127.0.0.1:6379> get n
"a0"什么时候用？一般用不到，不过有一个牛逼的场景可以用：
统计在线用户数有多少，一般会怎么去算？当前有哪些用户在线
如果数据库存，每个字段都存在线用户有谁，都会占用很多空间。
# 每个用户是不是一个ID，ID是唯一的，假如2亿用户、1亿在线
127.0.0.1:6379> setbit user 1000 1 # 假如用户ID 1000登录
127.0.0.1:6379> setbit user 27 1
127.0.0.1:6379> setbit user 6000 1
127.0.0.1:6379> bitcount user # 查看在线用户
(integer) 3
127.0.0.1:6379> getbit user 27 # 查看用户在不在线
(integer) 1
127.0.0.1:6379> getbit user 28 # 0 说明用户不在线
(integer) 0按位来存，2亿用户，只占用2亿个位空间。
- incr(self, name, amount=1)
# 自增 name对应的值，当name不存在时，则创建name＝amount，否则，则自增。
# 参数：
# name,Redis的name
# amount,自增数（必须是整数）
# 注：同incrby- decr(self, name, amount=1)
# 自减 name对应的值，当name不存在时，则创建name＝amount，否则，则自减。
# 参数：
# name,Redis的name
# amount,自减数（整数）127.0.0.1:6379> incr login_users
(integer) 1
127.0.0.1:6379> incr login_users
(integer) 2
127.0.0.1:6379> incr login_users
(integer) 3
127.0.0.1:6379> decr login_users
(integer) 2
127.0.0.1:6379> decr login_users
(integer) 1- incrbyfloat(self, name, amount=1.0)
# 自增 name对应的值，当name不存在时，则创建name＝amount，否则，则自增。
# 参数：
# name,Redis的name
# amount,自增数（浮点型）
127.0.0.1:6379> incrbyfloat nu 1.2
"1.2"
127.0.0.1:6379> incrbyfloat nu 1.2
"2.4"
127.0.0.1:6379> incrbyfloat nu 1.2
"3.6"- append(key, value)
# 在redis name对应的值后面追加内容
# 参数：
key, redis的name
value, 要追加的字符串
127.0.0.1:6379> set name gf
OK
127.0.0.1:6379> get name
"gf"
127.0.0.1:6379> append name feng
(integer) 6
127.0.0.1:6379> get name
"gffeng"2、hash操作
hash 大家都比较熟悉，那redis里的hash指的什么呢？
上面的str操作，name和age之间没有关系，如果特别多，就混了。
Hash操作，redis中Hash在内存中的存储格式如下图：
name hash
|````````````|
n1 --------> | k1 --> v1 |
| k2 --> v2 |
|____________|
|````````````|
n2 --------> | k7 --> v7 |
|____________|- hset(name, key, value)
# name对应的hash中设置一个键值对（不存在，则创建；否则，修改）
# 参数：
# name，redis的name
# key，name对应的hash中的key
# value，name对应的hash中的value
# 注：
# hsetnx(name, key, value),当name对应的hash中不存在当前key时则创建（相当于添加）
127.0.0.1:6379> hset user name fgf
(integer) 1
127.0.0.1:6379> hset user id 27
(integer) 1
127.0.0.1:6379> hgetall user # 查看所有
1) "name"
2) "fgf"
3) "id"
4) "27"
127.0.0.1:6379> hkeys user # 查看所有key
1) "name"
2) "id"
127.0.0.1:6379> hvals user # 查看所有值
1) "fgf"
2) "27"- hmset(name, mapping)
# 在name对应的hash中批量设置键值对
# 参数：
# name，redis的name
# mapping，字典，如：{'k1':'v1', 'k2': 'v2'}
127.0.0.1:6379> hmset info k1 1 k2 2
127.0.0.1:6379> hmget info k1 k2
1) "1"
2) "2"hmget(name, keys, *args)
# 在name对应的hash中获取多个key的值hlen(name)
# 获取name对应的hash中键值对的个数hexists(name, key)
# 检查name对应的hash是否存在当前传入的key
127.0.0.1:6379> hexists user name
(integer) 1
127.0.0.1:6379> hexists user age
(integer) 0hdel(name,*keys)
# 将name对应的hash中指定key的键值对删除hincrby(name, key, amount=1)
# 自增name对应的hash中的指定key的值，不存在则创建key=amount
# 参数：
# name，redis中的name
# key， hash对应的key
# amount，自增数（整数）
127.0.0.1:6379> hincrby info k2 1
(integer) 3
127.0.0.1:6379> hincrby info k2 1
(integer) 4hincrbyfloat(name, key, amount=1.0)
hscan(name, cursor=0, match=None, count=None) 过滤
# 增量式迭代获取，对于数据大的数据非常有用，hscan可以实现分片的获取数据，
并非一次性将数据全部获取完，从而放置内存被撑爆
# 参数：
# name，redis的name
# cursor，游标（基于游标分批取获取数据）
# match，匹配指定key，默认None 表示所有的key
# count，每次分片最少获取个数，默认None表示采用Redis的默认分片个数
127.0.0.1:6379> hscan info 0 match k*
1) "0"
2) 1) "k1"
2) "1"
3) "k2"
4) "4"hscan_iter(name, match=None, count=None)
# 利用yield封装hscan创建生成器，实现分批去redis中获取数据
# 参数：
# match，匹配指定key，默认None 表示所有的key
# count，每次分片最少获取个数，默认None表示采用Redis的默认分片个数
# 如：
# for item in r.hscan_iter('xx'):
# print item3、列表操作
127.0.0.1:6379> lpush names fgf fzh js # 左边放
(integer) 3
127.0.0.1:6379> lrange names 0 -1 # 先入后出
1) "js"
2) "fzh"
3) "fgf"
127.0.0.1:6379> rpush names A B # 右边放
(integer) 5
127.0.0.1:6379> lrange names 0 -1
1) "js"
2) "fzh"
3) "fgf"
4) "A"
5) "B"
lpushx(name,value)
# 在name对应的list中添加元素，只有name已经存在时，值添加到列表的最左边
llen(name)
# name对应的list元素的个数
linsert(name, where, refvalue, value))
# 在name对应的列表的某一个值前或后插入一个新值
# 参数：
# name，redis的name
# where，BEFORE或AFTER
# refvalue，标杆值，即：在它前后插入数据
# value，要插入的数据
127.0.0.1:6379> linsert names before B C
(integer) 6
127.0.0.1:6379> lrange names 3 -1
1) "A"
2) "C"
3) "B"
r.lset(name, index, value)
# 对name对应的list中的某一个索引位置重新赋值
r.lrem(name, value, num)
# 在name对应的list中删除指定的值
lpop(name)
# 在name对应的列表的左侧获取第一个元素并在列表中移除，返回值则是第一个元素
lindex(name, index)
# 在name对应的列表中根据索引获取列表元素
ltrim(name, start, end)
# 保留start-end索引之的值，移除其他值
127.0.0.1:6379> ltrim names 0 2
OK
127.0.0.1:6379> lrange names 0 -1
1) "js"
2) "fzh"
3) "fgf"
rpoplpush(src, dst)
# 从一个列表取出最右边的元素，同时将其添加至另一个列表的最左边
# 参数：
# src，要取数据的列表的name
# dst，要添加数据的列表的name
127.0.0.1:6379> rpush names2 AB
(integer) 1
127.0.0.1:6379> rpoplpush names names2
"fgf"
127.0.0.1:6379> lrange names 0 -1
1) "js"
2) "fzh"
127.0.0.1:6379> lrange names2 0 -1
1) "fgf"
2) "AB"
blpop(keys, timeout)
# 从左到右去删除对应列表的元素，无元素则等待设置的超时时间
brpoplpush(src, dst, timeout=0)
# 从一个列表的右侧移除一个元素并将其添加到另一个列表的左侧4、集合操作
sadd(name,values)
# name对应的集合中添加元素
127.0.0.1:6379> sadd name3 fgf a b b
(integer) 3
127.0.0.1:6379> smembers name3
1) "fgf"
2) "b"
3) "a"scard(name)
# 获取name对应的集合中元素个数sdiff(keys, *args)
# 在第一个name对应的集合中且不在其他name对应的集合的元素集合
127.0.0.1:6379> sadd name4 b c d
(integer) 3
127.0.0.1:6379> sdiff name3 name4
1) "fgf"
2) "a"sdiffstore(dest, keys, *args)
# 获取第一个name对应的集合中且不在其他name对应的集合，再将其新加入到dest对应的集合中sinter(keys, *args)
# 获取多一个name对应集合的交集sinterstore(dest, keys, *args)
# 获取多一个name对应集合的并集，再讲其加入到dest对应的集合中sismember(name, value)
# 检查value是否是name对应的集合的成员smembers(name)
# 获取name对应的集合的所有成员smove(src, dst, value)
# 将某个成员从一个集合中移动到另外一个集合spop(name)
# 从集合的右侧（尾部）移除一个成员，并将其返回srandmember(name, numbers)
# 从name对应的集合中随机获取 numbers 个元素srem(name, values)
# 在name对应的集合中删除某些值sunion(keys, *args)
# 获取多一个name对应的集合的并集sunionstore(dest,keys, *args)
# 获取多一个name对应的集合的并集，并将结果保存到dest对应的集合中有序集合
zadd(name, *args, **kwargs)
# 在name对应的有序集合中添加元素
127.0.0.1:6379> zadd z1 10 fgf 7 fzh 2 js 5 ajs
(integer) 3
127.0.0.1:6379> zrange z1 0 -1
1) "js"
2) "ajs"
3) "fzh"
4) "fgf"
127.0.0.1:6379> zrange z1 0 -1 withscores
1) "js"
2) "2"
3) "ajs"
4) "5"
5) "fzh"
6) "7"
7) "fgf"
8) "10"zcount(name, min, max)
# 获取name对应的有序集合中分数 在 [min,max] 之间的个数
127.0.0.1:6379> zcount z1 5 10
(integer) 3zincrby(name, value, amount)
# 自增name对应的有序集合的 name 对应的分数zrank(name, value)
# 获取某个值在 name对应的有序集合中的排行（从 0 开始）
127.0.0.1:6379> zrank z1 fgf
(integer) 3
127.0.0.1:6379> zrank z1 ajs
(integer) 1zrem(name, values)
# 删除name对应的有序集合中值是values的成员zremrangebyrank(name, min, max)
# 根据排行范围删除
127.0.0.1:6379> zremrangebyrank z1 1 3
(integer) 3zremrangebyscore(name, min, max)
# 根据分数范围删除zremrangebylex(name, min, max)
# 根据值返回删除zscore(name, value)
# 获取name对应有序集合中 value 对应的分数zinterstore(dest, keys, aggregate=None)
# 获取两个有序集合的交集
# aggregate的值为: SUM MIN MAX
127.0.0.1:6379> zadd z2 98 fgf 100 fzh 90 js
(integer) 3
127.0.0.1:6379> zadd z3 88 fgf 89 fzh 92 js
(integer) 3
127.0.0.1:6379> ZINTERSTORE z4 2 z2 z3 # 2 指后边2个集合的交集
(integer) 3
127.0.0.1:6379> zrange z2 0 -1 withscores
1) "js"
2) "90"
3) "fgf"
4) "98"
5) "fzh"
6) "100"
127.0.0.1:6379> zrange z3 0 -1 withscores
1) "fgf"
2) "88"
3) "fzh"
4) "89"
5) "js"
6) "92"
127.0.0.1:6379> zrange z4 0 -1 withscores
1) "js"
2) "182"
3) "fgf"
4) "186"
5) "fzh"
6) "189"zunionstore(dest, keys, aggregate=None)
# 获取两个有序集合的并集
# aggregate的值为: SUM MIN MAX5、其他操作
del(*names)
# 根据删除redis中的任意数据类型
exists(name)
# 检测redis的name是否存在
keys(pattern='*')
# 根据模型获取redis的name
# 更多：
# KEYS * 匹配数据库中所有 key 。
# KEYS h?llo 匹配 hello ， hallo 和 hxllo 等。
# KEYS h*llo 匹配 hllo 和 heeeeello 等。
# KEYS h[ae]llo 匹配 hello 和 hallo ，但不匹配 hillo
expire(name ,time)
# 为某个redis的某个name设置超时时间
rename(src, dst)
# 对redis的name重命名
move(name, db))
# 将redis的某个值移动到指定的db下，若有则不移动
select db_name
# 切换到其他db，redis有16个db
randomkey()
# 随机获取一个redis的name（不删除）
type(name)
# 获取name对应值的类型
scan(cursor=0, match=None, count=None)
scan_iter(match=None, count=None)
# 同字符串操作，用于增量迭代获取key三、管道
redis-py默认在执行每次请求都会创建（连接池申请连接）和断开（归还连接池）一次连接操作，如果想要在一次请求中指定多个命令，则可以使用pipline实现一次请求指定多个命令，并且默认情况下一次pipline 是原子性操作。
import redis
import time
pool = redis.ConnectionPool(host='10.211.55.4', port=6379, db=5)
r = redis.Redis(connection_pool=pool)
# pipe = r.pipeline(transaction=False)
pipe = r.pipeline(transaction=True)
pipe.set('name', 'alex')
time.sleep(60)
pipe.set('role', 'sb')
pipe.execute()四、发布订阅
收音机举例发布订阅
redishelper.py
import redis
class RedisHelper:
def __init__(self):
self.__conn = redis.Redis(host='10.211.55.4')
self.chan_sub = 'fm104.5'
self.chan_pub = 'fm104.5'
def public(self, msg):
self.__conn.publish(self.chan_pub, msg)
return True
def subscribe(self):
pub = self.__conn.pubsub() # 打开收音机
pub.subscribe(self.chan_sub) # 调频道
pub.parse_response() # 准备接收
return pub订阅方
from RedisHelper import RedisHelper
obj = RedisHelper()
redis_sub = obj.subscribe()
while True:
msg= redis_sub.parse_response()
print (msg)发布方
from RedisHelper import RedisHelper
obj = RedisHelper()
obj.public('hello')转载请务必保留此出处：http://blog.csdn.net/fgf00/article/details/52917154
更多参见：
https://github.com/andymccurdy/redis-py/
http://doc.redisfans.com/