## redis介绍,安装
“`python
# redis 是什么,特点,存数据的地方,cs架构,数据库,开源软件
1 是一个软件(用c语言写的,初级版本代码只有1w多行 7.x,公司 5.x,4.x多)
2 非关系型(mysql关系型数据库;没有外键关联关系)数据库,nosql(not only sql)数据库,
3 数据都放在内存中(读写速度超级快–》每秒的qps 10w)
4 key-value形式存储
5 有5大数据类型(字符串,list,hash(字典),集合,有序集合)
# redis 好处
(1) 速度快,因为数据存在内存中,类似于python的字典的优势就是查找和操作的速度快
(2) 支持丰富数据类型,支持string,list,set,sorted set,hash
(3) 支持事务,操作都是原子性,所谓的原子性就是对数据的更改要么全部执行,要么全部不执行
(4) 丰富的特性:可用于缓存(最广泛:缓存数据库),消息,按key设置过期时间,过期后将会自动删除
# redis 最适合的场景
(1)会话缓存(Session Cache)—》原来session放在了djagno-session表中,速度慢,放到redis中速度超级快
(2)全页缓存,接口缓存:
(3)队列:程序的解耦,不是专业的,真正专业的消息队列:kafka,rabbitmq…
(4)排行榜/计数器:有序集合, 字符串类型做计数器累加(由于6.x之前redis是单线程单进程架构,不存在并发安全问题)
# redis 为什么这么快?
-1 纯内存操作
-2 使用io多路复用的网络模型(select,poll,epoll模型),epoll模型
-3 单线程,单进程架构,没有进程线程间切换的消耗
# redis的安装(linux,mac,win)
-redis作者对win的支持不好—》win不支持epoll的网络模型,只支持select
-于是:微软就自己把redis改了改–》编译成可执行文件–》可以运行在win上
-两个大的分支
-一个分支只维护到3.x
-https://github.com/microsoftarchive/redis/releases
-另一个分支维护到5.x
-https://github.com/tporadowski/redis/releases/
-下载完成,一路下一步
-会创建出一个redis服务—(mysql服务),安装路径加入到环境变量了
-以后,启动服务,在任意路径敲 redis-cli 都能识别
-启动redis服务(redis的服务的,执行命令)
redis-server.exe redis.windows-service.conf
-客户端连接(cmd窗口下)
redis-cli -h 127.0.0.1 -p 6379
redis-cli
-redis 是key-value存储,但是它默认有16个库
# 图形化客户端–》选择很多
-redis-desktop-manage 源码是个开源软件,用qt写的,图形化界面,开始免费,后来用的人多了,收费了,99永久—-》等同于navicate
-一路下一步
“`
## redis基本链接和连接池
“`python
# python 写脚本,操作redis,本质python代码就是redis的客户端
# pip install redis
“`
### 3.1 普通链接
“`python
# 第一步:导入Redis类
from redis import Redis
# 第二部: 实例化得到对象
conn=Redis(host=”localhost”,port=6379,) # 默认连本地
# 第三步:操作数据(非常对方法,操作:字符串,hash,链表操作)
conn.set(‘name’,’lqz’)
conn.close()
“`
### 3.2 连接池
**pool.py**
“`python
import redis
POOL = redis.ConnectionPool(max_connections=10)
“`
**链接**
“`python
from pool import POOL
# 第三步:从池中取一个链接使用
conn = redis.Redis(connection_pool=POOL)
# 第四步:操作数据(非常对方法,操作:字符串,hash,链表操作)
conn.set(‘age’, ’19’)
conn.close()
“`
## redis字符串操作
“`python
# redis:5大数据类型—》字符串,链表,hash,集合,有序集合
# redis支持5大数据类型,只支持到一层,第二层必须是字符串
# Memcached:只支持字符串,都是纯内存,断电数据丢失 redis可以持久化
“`
“`python
”’
1 set(name, value, ex=None, px=None, nx=False, xx=False)
2 setnx(name, value)
3 psetex(name, time_ms, value)
4 mset(*args, **kwargs)
4 get(name)
5 mget(keys, *args)
6 getset(name, value)
7 getrange(key, start, end)
8 setrange(name, offset, value)
9 setbit(name, offset, value)
10 getbit(name, offset)
11 bitcount(key, start=None, end=None)
12 strlen(name)
13 incr(self, name, amount=1)
14 incrbyfloat(self, name, amount=1.0)
15 decr(self, name, amount=1)
16 append(key, value)
”’
from redis import Redis
conn = Redis()
# 1 set(name, value, ex=None, px=None, nx=False, xx=False)
# conn.set(‘name’,’pyy’)
# ex:过期时间(秒),px,过期时间(毫秒)
# conn.set(‘age’,19,ex=5) # 过期就没有了—》最适合存 验证码
# nx,如果设置为True,则只有name不存在时,当前set操作才执行,值存在,就修改不了,执行没效果
# conn.set(‘name’,’lyf’,nx=True)
# conn.set(‘name’,’lyf’)
# xx,如果设置为True,则只有name存在时,当前set操作才执行,值存在才能修改,值不存在,不会设置新值
# conn.set(‘name’,’lqz’,xx=True)
# 2 setnx(name, value)—>等同于set nx=True
# conn.setnx(‘name’,’xxx’)
# 3 psetex(name, time_ms, value) # 以毫秒计时
# conn.psetex(‘age’,3000,’19’)
# 4 mset(*args, **kwargs) # 批量设置
# conn.mset({‘age’: 19, ‘name’: ‘lxx’, ‘wife’: ‘刘亦菲’})
# 面试:一次mset和多次set的区别?
# 4 get(name) # 获取值
# res=conn.get(‘wife’)
# print(str(res,encoding=’utf-8′))
# s=’李清照’
# print(bytes(s,encoding=’utf-8′))
# 5 mget(keys, *args) # 批量获取值
# res=conn.mget(‘name’,’age’,’wife’)
# res=conn.mget([‘name’,’age’,’wife’])
# print(res)
# 6 getset(name, value) # 获取并设置值
# res=conn.getset(‘name’,’彭于晏’)
# print(res)
# 7 getrange(key, start, end) # 根据起始和终止,获取字符串,以字节计数 ,中在redis中存储是用utf-8存储的
# res=conn.getrange(‘name’,0,2)
# print(str(res,encoding=’utf-8′))
# 8 setrange(name, offset, value) # 指定位置设置值
# conn.setrange(‘name’,3,’bbb’)
# 9 setbit(name, offset, value) # 指定比特位修改成
# conn.setbit(‘name’,7,0) # 00000000 00000000 00000000
# 10 getbit(name, offset) # 了解
# print(conn.getbit(‘name’,7))
# 11 bitcount(key, start=None, end=None)
# print(conn.bitcount(‘name’,0,4))
# 12 strlen(name) # 返回name对应值的字节长度
# print(conn.strlen(‘name’))
# 13 incrby(self, name, amount=1) # 计数器
# conn.incrby(‘age’)
# 14 incrbyfloat(self, name, amount=1.0)
# conn.incrbyfloat(‘age’)
# 15 decrby(self, name, amount=1)
# conn.decrby(‘age’)
# 16 append(key, value)
# conn.append(‘name’,’sb’)
conn.close()
”’
get
set
mget
mset
strlen
incrby
”’
“`
## redis hash操作
“`python
# 字典—》基于数组存储—》根据key值通过hash函数运算得到一个地址,把value值放进去
“`
“`python
”’
1 hset(name, key, value)
2 hmset(name, mapping)
3 hget(name,key)
4 hmget(name, keys, *args)
5 hgetall(name)
6 hlen(name)
7 hkeys(name)
8 hvals(name)
9 hexists(name, key)
10 hdel(name,*keys)
11 hincrby(name, key, amount=1)
12 hincrbyfloat(name, key, amount=1.0)
13 hscan(name, cursor=0, match=None, count=None)
14 hscan_iter(name, match=None, count=None)
”’
from redis import Redis
conn = Redis()
# 1 hset(name, key, value)
# conn.hset(‘userinfo’,’name’,’lqz’)
# conn.hset(‘userinfo’,’age’,’29’)
# 2 hmset(name, mapping)
# conn.hmset(‘userinfo1’, {‘name’: ‘pyy’, ‘age’: 39})
# conn.hset(‘userinfo2’,mapping={‘name’: ‘刘亦菲’, ‘age’: 39})
# 3 hget(name,key)
# print(conn.hget(‘userinfo’,’age’))
# 4 hmget(name, keys, *args)
# print(conn.hmget(‘userinfo’,[‘name’,’age’]))
# 5 hgetall(name) # 慎用—》如果hash类型数据量特别大,很可能撑爆内存
# print(conn.hgetall(‘userinfo’))
# 6 hlen(name)
# print(conn.hlen(‘userinfo’))
# 7 hkeys(name)
# print(conn.hkeys(‘userinfo’))
# 8 hvals(name)
# print(conn.hvals(‘userinfo’))
# 9 hexists(name, key)
# print(conn.hexists(‘userinfo’,’wife’))
# print(conn.hexists(‘userinfo’,’age’))
# 10 hdel(name,*keys)
# conn.hdel(‘userinfo’,’age’)
# 11 hincrby(name, key, amount=1)
# conn.hincrby(‘userinfo1′,’age’)
# 12 hincrbyfloat(name, key, amount=1.0)
# 注意一下—》不建议使用hgetall—》分批取值
# for i in range(1000):
# conn.hset(‘htest’,’name_%s’%i,’鸡蛋_%s’%i)
# res=conn.hgetall(‘htest’)
# print(res)
# 13 hscan(name, cursor=0, match=None, count=None)— >这个不是直接用,需要配合hscan_iter来用
# res=conn.hscan(‘htest’,cursor=0,count=55)
# print(res)
# print(len(res[1]))
# 14 hscan_iter(name, match=None, count=None)
# 把htest数据全取出来打印,批量获取,每次取10条
for item in conn.hscan_iter(‘htest’,count=10):
print(item)
# for item in conn.hgetall(‘htest’):
# print(item)
conn.close()
”’
hset
hget
hlen
hexists
hincrby
”’
“`
## 1 redis 列表操作
“`python
”’
1 lpush(name,values)
2 lpushx(name,value)
3 rpushx(name, value) 表示从右向左操作
4 llen(name)
5 linsert(name, where, refvalue, value))
6 lset(name, index, value)
7 lrem(name, value, num)
8 lpop(name)
9 lindex(name, index)
10 lrange(name, start, end)
11 ltrim(name, start, end)
12 rpoplpush(src, dst)
13 blpop(keys, timeout)
14 brpoplpush(src, dst, timeout=0)
15 自定义增量迭代
”’
from redis import Redis
conn = Redis()
# 1 lpush(name,values)
# conn.lpush(‘girl_friend’,’刘亦菲’,’迪丽热巴’)
# 2 lpushx(name,value) 只有name已经存在时,值添加到列表的最左边
# conn.lpushx(‘girl_friend’,’杨颖’)
# 3 rpushx(name, value) 表示从右向左操作
# conn.rpush(‘girl_friend’,’彭于晏’)
# 4 llen(name)
# print(conn.llen(‘girl_friend’))
# 5 linsert(name, where, refvalue, value))
# name: redis的key值, where: before或者after refvalue: 列表中的元素(刘亦菲), value :要插入的值
# conn.linsert(‘girl_friend’,where=’after’,refvalue=’刘亦菲’,value=’lqz’)
# conn.linsert(‘girl_friend’,where=’before’,refvalue=’刘亦菲’,value=’lqz’)
# conn.linsert(‘girl_friend’,where=’before’,refvalue=’迪丽热巴’,value=’lqz’)
# 6 lset(name, index, value) # 从零开始
# conn.lset(‘girl_friend’,0,’凤姐’)
# 7 lrem(name, value, num) # 正数是从左侧,负数是从右侧,0表示删所有
# conn.lrem(‘girl_friend’,1,’lqz’) # 从左侧删1个
# conn.lrem(‘girl_friend’,-1,’lqz’) # 从右侧删1个
# 8 lpop(name) # 从左侧弹出
# res=conn.lpop(‘girl_friend’)
# res = conn.rpop(‘girl_friend’)
# print(str(res, encoding=’utf-8′))
# 9 lindex(name, index)
# res=conn.lindex(‘girl_friend’,2)
# print(str(res,encoding=’utf-8′))
# 10 lrange(name, start, end)
# res=conn.lrange(‘girl_friend’,0,2) # 前闭后闭区间
# print(res)
print(conn.lrange(‘test’,0,conn.llen(‘test’)))
# 11 ltrim(name, start, end) # 修剪
# conn.ltrim(‘girl_friend’,1,3)
# 12 rpoplpush(src, dst)
# conn.lpush(‘wife1′,’ee’)
# conn.rpoplpush(‘girl_friend’,’wife1′)
# 13 blpop(keys, timeout) # 记住—》消息队列本质就是基于它—》redis可以作为消息队列
# 阻塞式 弹出,如果列表中有值,就弹出,如果没有值就阻塞,直到有值再弹出
# print(conn.blpop(‘lqz’))
# 14 brpoplpush(src, dst, timeout=0)
# 15 自定义增量迭代—-》
”’
# 由于redis类库中没有提供对列表元素的增量迭代,如果想要循环name对应的列表的所有元素,那么就需要:
# 1、获取name对应的所有列表
# 2、循环列表
# 但是,如果列表非常大,那么就有可能在第一步时就将程序的内容撑爆,所有有必要自定义一个增量迭代的功能:
”’
# conn.lpush(‘test’,*[1,2,3,4,45,5,6,7,7,8,43,5,6,768,89,9,65,4,23,54,6757,8,68])
# def scan_list(name, count=2):
# index = 0
# while True:
# data_list = conn.lrange(name, index, count + index – 1)
# if not data_list:
# return
# index += count
# for item in data_list:
# yield item
#
#
# for item in scan_list(‘test’, 5):
# print(‘—‘)
# print(item)
conn.close()
“`
## redis管道
“`python
# redis不支持事务—》管道的操作—》多个命令放到一个管道中,然后一次性执行,要么都成功,要么都失败
# redis支持事务码?支持–》通过管道实现弱事务
-事务四个特性
-事务隔离级别
“`
“`python
from redis import Redis
conn=Redis()
# 创建要给管道
pipe = conn.pipeline(transaction=True)
pipe.multi() # 接受多条命令,放到管道中
pipe.decrby(‘zhangsan’,50)
raise Exception(‘异常了’)
pipe.incrby(‘lisi’,50)
pipe.execute() # 一次性执行管道中所有命令
conn.close()
“`
## redis其它操作
“`python
# redis的通用操作—》跟类型无关的操作
from redis import Redis
conn = Redis()
# 1 delete(*names)
# conn.delete(‘wife’)
# 2 exists(name)
# res = conn.exists(‘age’)
# print(res)
# 3 keys(pattern=’*’)
# res=conn.keys(‘*’)
# res=conn.keys(‘userinfo?’)
# print(res)
# 4 dbsize
# res=conn.dbsize()
# print(res)
#5 expire(name ,time)
# conn.expire(‘wife1’,5)
#6 rename(src, dst)
# conn.rename(‘test’,’test1′)
#7 move(name, db))
# conn.move(‘test1’,3)
#8 randomkey()
# # 随机获取一个redis的name(不删除)
# print(conn.randomkey())
#9 type(name)
print(conn.type(‘girl_friend’))
conn.close()
“`
## django中集成redis
“`python
# 两种方案
-1 通用方案
-写一个pool包
import redis
POOL=redis.ConnectionPool(max_connections=1024,decode_responses=True)
-在使用的位置导入
conn = Redis(connection_pool=POOL)
res = conn.get(‘name’)
-2 使用第三方:django-redis
-pip install django-redis
-配置文件配置
CACHES = {
“default”: {
“BACKEND”: “django_redis.cache.RedisCache”,
“LOCATION”: “redis://127.0.0.1:6379”,
“OPTIONS”: {
“CLIENT_CLASS”: “django_redis.client.DefaultClient”,
“CONNECTION_POOL_KWARGS”: {“max_connections”: 100}
# “PASSWORD”: “123”,
}
}
}
-在使用的位置
conn = get_redis_connection()
conn.set…..
# 一旦配置文件配置 CACHES 后,django的缓存框架(默认是内存),存储的位置也是redis
# 以后根本不需要会redis的操作,只需要使用
cache.set(‘name’,对象)
cache.get()
# 强大之处在于不需要关注设置的类型,直接设置就行
# 把python的对象,通过pickle序列化后,以string形式存到redis中了
“`
原创文章,作者:745907710,如若转载,请注明出处:https://blog.ytso.com/tech/database/278098.html