redis是Remote Dictionary Server(远程数据服务)的缩写,由意大利人antirez(Salvatore Sanfilippo)开发的一款内存高速缓存数据库,该软件使用C语言编写,它的数据模型为key-value。
Mysql是多线程
redis是单线程
内存的读写性能大概是磁盘的1-2个数量级,所以这里从本质上决定了Redis的读写性能高于Mysql。
操作都是原子性的(要么执行成功,要么不执行)
【用途】
1、缓存mysql
2、保存session
3、nosql数据库
4、消息队列
高可用、集群 Redis发展过程中的三种模式:1.x版主从、2.x版哨兵、3.x版集群
多实例
调优
监控
排错
【概念】
1)默认端口6379
2)redis有五种数据类型:
string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)、hash(哈希类型)
3)redis的单线程,导致所有IO也是串行化的,当单条数据太大,IO等待会费掉时间,而不是程序本身性能或者复杂度。
6)redis和memcache比较
1、数据支持类型
Redis不仅仅支持简单的k/v类型的数据,同时还提供list,set,zset,hash等数据结构的存储。
2、redis支持master-slave(主-从)模式应用
3、存储方式
数据都是缓存在内存中
memecache把数据全部存在内存之中,断电后会挂掉,数据不能超过内存大小。
redis会周期性的把更新的数据写入磁盘或者把修改操作写入追加的记录文件,并且在此基础上实现了master-slave(主从)同步。
4、Redis单个value的最大限制是1GB,memcached只能保存1MB的数据。
memcached,对于缓存对象大小有要求,单个对象不得大于1MB,且不支持复杂的数据类型,譬如SET等。
【安装】
yum install -y epel-release
yum install -y redis (yum install epel* -y)
#源码
cd /usr/local/src/
wget sha1sum hash redis-3.2.0.tar.gz sha1 0c1820931094369c8cc19fc1be62f598bc5961ca http://download.redis.io/releases/redis-3.2.0.tar.gz
#完整性:与 redis-hashes 对照
tar zxvf redis-3.2.0.tar.gz
cd redis-3.2.0
#启动
systemctl start redis.service
systemctl stop redis.service
systemctl status redis.service
systemctl restart redis.service
#随系统启动服务
systemctl enable redis.service
查看状态 :
ss -nlp|grep redis
或者
ps -ef | grep redis
#使用redis
redis-cli
redis-cli -h 127.0.0.1 -p 6379
redis-cli -h 127.0.0.1 -p 6379 -a password
6、Redis开启远程登录连接
原来是redis默认只能localhost登录,所以需要开启远程登录。解决方法如下:
在redis的配置文件redis.conf中,找到bind localhost注释掉。
注释掉本机,局域网内的所有计算机都能访问。
band localhost 只能本机访问,局域网内计算机不能访问。
bind 局域网IP 只能局域网内IP的机器访问, 本地localhost都无法访问。
我没有注释掉bind 127.0.0.1,而是将bind 127.0.0.1 改成了bind 0.0.0.0。
然后要配置防火墙 开放端口6379
启用redis的密码验证功能requirepass参数即可
【监控】
操作命令
get
set
info查看性能
https://blog.youkuaiyun.com/magicianofcodes/article/details/81870646
查看服务文件配置
cat /lib/systemd/system/redis.service //显示 [Unit]Description=Redis persistent key-value databaseAfter=network.target [Service]ExecStart=/usr/bin/redis-server /etc/redis.conf --supervised systemdExecStop=/usr/libexec/redis-shutdownType=notifyUser=redisGroup=redisRuntimeDirectory=redisRuntimeDirectoryMode=0755 [Install]WantedBy=multi-user.target
【集群搭建】
搭建一个最简单的Redis集群,那么至少需要6个节点:3个Master和3个Slave。为什么需要3个Master呢?如果你了解过Hadoop/Storm/Zookeeper这些的话,你就会明白一般分布式要求基数个节点,这样便于选举(少数服从多数的原则)
通过MySQL自动同步刷新Redis,原文地址
缓存最要注意的就是一致性问题。
redis 本身有持久化,为什么还要写进 mysql 呢?
1. 场景不一样, redis 的持久化是附加功能, mysql 的持久化是核心功能
2. redis 的 flushdb 、 flushall 太犀利了,用 redis 来持久化数据总感觉不靠谱
3. 持久化机制不一样,举个例子来说,当数据量达到 10G 的时候,你改了几条数据, mysql 只增量地持久化这几条数据;而 redis 只知道自己该持久化了,然后把 10G 数据完整地从内存 dump 到磁盘,是不是很过瘾
4.redis 的持久化,特别是 AOF 一点也不靠谱,对性能影响太大, 开过之后再也不想开了. RDB 会丢数据.
5.mysql做一些后期统计
redis是高性能内存缓存,容量依赖于物理内存。如果你物理内存只有2G,却想用Redis存20G的东西,这是错误的用法。
而mysql对内存依赖没Redis严重,但mysql对硬盘会有一定程度的依赖。如果硬盘性能不好,mysql在保存大于物理内存数量的数据时,性能也不会好。
我的看法是:因为redis存储在内存中,如果存储在内存中,存储容量肯定要比磁盘少很多,那么要存储大量数据,只能花更多的钱去购买内存,造成在一些不需要高性能的地方是相对比较浪费的,所以目前基本都是mysql(主) + redis(辅),在需要性能的地方使用redis,在不需要高性能的地方使用mysql,好钢用在刀刃上
一、 mySQL里有2000w数据,redis中只存20w的数据,如何保证redis中的数据都是热点数据
相关知识: redis 内存数据集大小上升到一定大小的时候,就会施行数据淘汰策略。redis 提供 6种数据淘汰策略:
volatile-lru:从已设置过期时间的数据集(server.db[i].expires)中挑选最近最少使用的数据淘汰
volatile-ttl:从已设置过期时间的数据集(server.db[i].expires)中挑选将要过期的数据淘汰
volatile-random:从已设置过期时间的数据集(server.db[i].expires)中任意选择数据淘汰
allkeys-lru:从数据集(server.db[i].dict)中挑选最近最少使用的数据淘汰
allkeys-random:从数据集(server.db[i].dict)中任意选择数据淘汰
no-enviction(驱逐):禁止驱逐数据
三、 Redis 常见的性能问题都有哪些?如何解决?
1).Master写内存快照,save命令调度rdbSave函数,会阻塞主线程的工作,当快照比较大时对性能影响是非常大的,会间断性暂停服务,所以Master最好不要写内存快照。
2).Master AOF持久化,如果不重写AOF文件,这个持久化方式对性能的影响是最小的,但是AOF文件会不断增大,AOF文件过大会影响Master重启的恢复速度。Master最好不要做任何持久化工作,包括内存快照和AOF日志文件,特别是不要启用内存快照做持久化,如果数据比较关键,某个Slave开启AOF备份数据,策略为每秒同步一次。
3).Master调用BGREWRITEAOF重写AOF文件,AOF在重写的时候会占大量的CPU和内存资源,导致服务load过高,出现短暂服务暂停现象。
4). Redis主从复制的性能问题,为了主从复制的速度和连接的稳定性,Slave和Master最好在同一个局域网内
四、请用Redis和任意语言实现一段恶意登录保护的代码,限制1小时内每用户Id最多只能登录5次。具体登录函数或功能用空函数即可,不用详细写出。
用列表实现:列表中每个元素代表登陆时间,只要最后的第5次登陆时间和现在时间差不超过1小时就禁止登陆.用Python写的代码如下:#!/usr/bin/env python3import redis
import sys
import timer = redis.StrictRedis(host=’127.0.0.1′, port=6379, db=0)
try:
id = sys.argv[1]
except:
print(‘input argument error’)
sys.exit(0)if r.llen(id) >= 5 and time.time() – float(r.lindex(id, 4)) <= 3600:
print(“you are forbidden logining”)else:
print(‘you are allowed to login’)
r.lpush(id, time.time()) # login_func()
排错
1)Failed to start Redis persistent key-value database.
原因:密码配置错误requirepass "password",
转载于:https://blog.51cto.com/yanjiu/1922654