阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

Redis 主从配置实例、注意事项、及备份方式

244次阅读
没有评论

共计 4343 个字符,预计需要花费 11 分钟才能阅读完成。

下面的列表清楚的解释了 Redis Replication 的特点和优势。

    1). 同一个 Master 可以同步多个 Slaves。
    2). Slave 同样可以接受其它 Slaves 的连接和同步请求,这样可以有效的分载 Master 的同步压力。因此我们可以将 Redis 的 Replication 架构视为图结构。
    3). Master Server 是以非阻塞的方式为 Slaves 提供服务。所以在 Master-Slave 同步期间,客户端仍然可以提交查询或修改请求。
    4). Slave Server 同样是以非阻塞的方式完成数据同步。在同步期间,如果有客户端提交查询请求,Redis 则返回同步之前的数据。
    5). 为了分载 Master 的读操作压力,Slave 服务器可以为客户端提供只读操作的服务,写服务仍然必须由 Master 来完成。即便如此,系统的伸缩性还是得到了很大的提高。
    6). Master 可以将数据保存操作交给 Slaves 完成,从而避免了在 Master 中要有独立的进程来完成此操作。

Replication 的工作原理:

在 Slave 启动并连接到 Master 之后,它将主动发送一个 SYNC 命令。此后 Master 将启动后台存盘进程,同时收集所有接收到的用于修改数据集的命令,在后台进程执行完毕后,Master 将传送整个数据库文件到 Slave,以完成一次完全同步。而 Slave 服务器在接收到数据库文件数据之后将其存盘并加载到内存中。此后,Master 继续将所有已经收集到的修改命令,和新的修改命令依次传送给 Slaves,Slave 将在本次执行这些数据修改命令,从而达到最终的数据同步。

如果 Master 和 Slave 之间的链接出现断连现象,Slave 可以自动重连 Master,但是在连接成功之后,一次完全同步将被自动执行。

下面是我使用的配置,使用主从模式,在 master 上关掉所有持久化,在 slave 上使用 AOF 持久化:
$cat /opt/redis/etc/redis.conf
######Master config
###General 配置
daemonize yes    #使用 daemon 方式运行程序,默认为非 daemon 方式运行
pidfile /tmp/redis.pid  #pid 文件位置
port 6379  #使用默认端口
timeout 30  # client 端空闲断开连接的时间
loglevel warning  #日志记录级别,默认是 notice,我这边使用 warning, 是为了监控日志方便。使用 warning 后,只有发生告警才会产生日志,这对于通过判断日志文件是否为空来监控报警非常方便。logfile /opt/logs/redis/redis.log  #日志产生的位置
databases 16  #默认是 0,也就是只用 1 个 db, 我这边设置成 16,方便多个应用使用同一个 redis server。使用 select n 命令可以确认使用的 redis db , 这样不同的应用即使使用相同的 key 也不会有问题。

### 下面是 SNAPSHOTTING 持久化方式的策略。为了保证数据相对安全,在下面的设置中,更改越频繁,SNAPSHOTTING 越频繁,也就是说,压力越大,反而花在持久化上的资源会越多。所以我选择了 master-slave 模式,并在 master 关掉了 SNAPSHOTTING。
#save 900 1    #在 900 秒之内,redis 至少发生 1 次修改则 redis 抓快照到磁盘
#save 300 100  #在 300 秒之内,redis 至少发生 100 次修改则 redis 抓快照到磁盘
#save 60 10000  #在 60 秒之内,redis 至少发生 10000 次修改则 redis 抓快照到磁盘
rdbcompression yes  #使用压缩
dbfilename dump.rdb  #SNAPSHOTTING 的文件名
dir /opt/data/redis/ #SNAPSHOTTING 文件的路径

###REPLICATION 设置,
#slaveof# 如果这台机器是台 redis slave,可以打开这个设置。如果使用 master-slave 模式,我就会在 master 上把 SNAPSHOTTING 关了,这样可以不用在 master 上做持久化,而是在 slave 上做,这样可以大大提高 master 内存使用率和系统性能。
#slave-serve-stale-data yes  #如果 slave 无法与 master 同步,是否还可以读

### SECURITY 设置 
#requirepass aaaaaaaaa  #redis 性能太好,用个 passwd 意义不大
#rename-command FLUSHALL “”  #可以用这种方式关掉非常危险的命令,如 FLUSHALL 这个命令,它清空整个 Redis 服务器的数据,而且不用确认且从不会失败 ###LIMIT 设置
maxclients 0 #无 client 连接数量限制
maxmemory 14gb #redis 最大可使用的内存量,我的服务器内存是 16G,如果使用 redis SNAPSHOTTING 的 copy-on-write 的持久会写方式,会额外的使用内存,为了使持久会操作不会使用系统 VM,使 redis 服务器性能下降,建议保留 redis 最大使用内存的一半 8G 来留给持久化使用,我个人觉得非常浪费。我没有在 master 上不做持久化,使用主从方式 maxmemory-policy volatile-lru  #使用 LRU 算法删除设置了过期时间的 key, 但如果程序写的时间没有写 key 的过期时间,建议使用 allkeys-lru,这样至少保证 redis 不会不可写入。###APPEND ONLY MODE 设置
appendonly no  #不使用 AOF,AOF 是另一种持久化方式,我没有使用的原因是这种方式并不能在服务器或磁盘损坏的情况下,保证数据可用性。
appendfsync everysec 
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb

###SLOW LOG 设置
slowlog-log-slower-than 10000  #如果操作时间大于 0.001 秒,记录 slow log, 这个 log 是记录在内存中的,可以用 redis-cli slowlog get 命令查看 slowlog-max-len 1024  #slow log 的最大长度

###VIRTUAL MEMORY 设置
vm-enabled no  #不使用虚拟内存,在 redis 2.4 版本,作者已经非常不建议使用 VM。
vm-swap-file /tmp/redis.swap
vm-max-memory 0
vm-page-size 32
vm-pages 134217728
vm-max-threads 4

###ADVANCED CONFIG 设置,下面的设置主要是用来节省内存的,我没有对它们做修改
hash-max-zipmap-entries 512 
hash-max-zipmap-value 64
list-max-ziplist-entries 512
list-max-ziplist-value 64
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
activerehashing yes

###INCLUDES 设置,使用下面的配置,可以配置一些个另其它的设置,如 slave 的配置
#include /path/to/local.conf
#include /path/to/other.conf
#include /opt/redis/etc/slave.conf  如果是 slave server, 把这个注释打开 slave 配置:
$cat /opt/redis/etc/slave.conf

######slave config
###REPLICATION 设置,
slaveof redis01 6397  #如果这台机器是台 redis slave,可以打开这个设置。如果使用 master-slave 模式,我就会在 master 上把 SNAPSHOTTING 关了,这样可以不用在 master 上做持久化,而是在 slave 上做,这样可以大大提高 master 内存使用率和系统性能。
slave-serve-stale-data no  #如果 slave 无法与 master 同步,设置成 slave 不可读,方便监控脚本发现问题。
###APPEND ONLY MODE 设置
appendonly yes  #在 slave 上使用了 AOF, 以保证数据可用性。其它后继数据备份工作
1、用 redis-cli bgsave 命令每天凌晨一次持久化一次 master redis 上的数据,并 CP 到其它备份服务器上。
2、用 redis-cli bgrewriteaof 命令每半小时持久化一次 slave redis 上的数据,并 CP 到其它备份服务器上。
3、写个脚本,定期 get master 和 slave 上的 key, 看两个是否同步,如果没有同步,及时报警。

下面关于 Redis 的文章您也可能喜欢,不妨参考下:

Ubuntu 14.04 下 Redis 安装及简单测试 http://www.linuxidc.com/Linux/2014-05/101544.htm

Redis 主从复制基本配置 http://www.linuxidc.com/Linux/2015-03/115610.htm

Redis 集群明细文档 http://www.linuxidc.com/Linux/2013-09/90118.htm

Ubuntu 12.10 下安装 Redis(图文详解)+ Jedis 连接 Redis http://www.linuxidc.com/Linux/2013-06/85816.htm

Redis 系列 - 安装部署维护篇 http://www.linuxidc.com/Linux/2012-12/75627.htm

CentOS 6.3 安装 Redis http://www.linuxidc.com/Linux/2012-12/75314.htm

Redis 安装部署学习笔记 http://www.linuxidc.com/Linux/2014-07/104306.htm

Redis 配置文件 redis.conf 详解 http://www.linuxidc.com/Linux/2013-11/92524.htm

Redis 的详细介绍:请点这里
Redis 的下载地址:请点这里

本文永久更新链接地址:http://www.linuxidc.com/Linux/2016-09/135119.htm

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-22发表,共计4343字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中