Linux下redis的持久化、主从同步与哨兵详解

1.0 redis持久化

Redis是一种内存型数据库,一旦服务器进程退出,数据库的数据就会丢失,为了解决这个问题,Redis提供了两种持久化的方案,将内存中的数据保存到磁盘中,避免数据的丢失。

1|1RDB持久化

redis提供了RDB持久化的功能,在指定的时间间隔内生成数据集的时间点快照(point-in-time snapshot)这个功能可以将redis在内存中的的状态保存到硬盘中,RDB持久化产生的RDB文件是一个经过压缩的二进制文件,这个文件被保存在硬盘中,redis可以通过这个文件还原数据库当时的状态。

它可以手动执行。

也可以在redis.conf中配置,定期执行。

优点:速度快,适合做备份,主从复制就是基于RDB持久化功能实现

rdb通过在redis中使用save命令触发 rdb

rdb配置参数:

port 6379
daemonize yes
pidfile /data/6379/redis.pid
loglevel notice
logfile "/data/6379/redis.log"
dir /data/6379
protected-mode yes
dbfilename dbmp.rdb
save 900 1
save 300 10
save 60 10000

每过900秒 有1个操作就进行持久化

save 900秒 1个修改类的操作

save 300秒 10个操作

save 60秒 10000个操作

2.触发rdb持久化,也可以手动save命令即可,生成 dump.rdb持久化文件

3.重启redis,数据不再丢失

4.rdb数据文件是二进制文件,人为的看不懂

1|2redis持久化之AOF

AOF(append-only log file)

记录服务器执行的所有变更操作命令(例如set del等),并在服务器启动时,通过重新执行这些命令来还原数据集

AOF 文件中的命令全部以redis协议的格式保存,新命令追加到文件末尾。

优点:最大程序保证数据不丢

缺点:日志记录非常大

配置方式

1.在配置文件中,添加aof参数

在redis-6379.conf中添加参数,开启aof功能

appendonly yes
appendfsync everysec

2.重启redis数据库,加载aof功能

3.检查redis数据目录/data/6379/是否产生了aof文件

[root@web02 6379]# ls
appendonly.aof dbmp.rdb redis.log

4.登录redis-cli,写入数据,实时监听aof文件信息

tail -f appendonly.aof

5.设置新key,检查aof信息,然后关闭redis,检查数据是否持久化

redis-cli -a redhat shutdown
redis-server /etc/redis.conf
redis-cli -a redhat

在不重启redis的情况下,切换rdb数据到aof数据中

1.配置redis支持rdb持久化

2.启动redis客户端,通过命令,临时切换到aof模式

127.0.0.1:6379> CONFIG set appendonly yes
OK
127.0.0.1:6379> CONFIG SET save ""
OK

3.检查此时的数据持久化方式是rdb,还是aof,检查appendonly.aof文件,数据变动

tail -f appendonly.aof

4.此时aof还未永久生效,写入参数到配置文件

编辑redis-6379.conf 添加如下参数

appendonly yes
appendfsync everysec

2|0主从同步

redis主从同步实现

1.准备三个redis数据库,redis支持多实例

三个配置文件,仅仅是端口的不同

在三个配置文件中,添加主从同步的参数

redis-6379.conf

port 6379
daemonize yes
pidfile /data/6379/redis.pid
loglevel notice
logfile "/data/6379/redis.log"
dir /data/6379
protected-mode yes
dbfilename dbmp.rdb
save 900 1
save 300 10
save 60 10000

redis-6380.conf

port 6380
daemonize yes
pidfile /data/6380/redis.pid
loglevel notice
logfile "/data/6380/redis.log"
dir /data/6380
protected-mode yes
dbfilename dbmp.rdb
save 900 1
save 300 10
save 60 10000
slaveof 127.0.0.1 6379

redis-6381.conf

port 6381
daemonize yes
pidfile /data/6381/redis.pid
loglevel notice
logfile "/data/6381/redis.log"
dir /data/6381
protected-mode yes
dbfilename dbmp.rdb
save 900 1
save 300 10
save 60 10000
slaveof 127.0.0.1 6379

2.启动三个数据库实例,查看主从同步身份

redis-cli -p 6379 info replication
redis-cli -p 6380 info replication
redis-cli -p 6381 info replication 

3:确保查看信息如下 并且检查是否同步

4.如果我主库挂了怎么办??

解决方案:

1.手动切换主从身份,选举一个新的主库

1.干掉6379主库
2.在6380上关闭自己的slave身份
slaveof no one
3.在6381上给与新的主人身份
salveof 127.0.0.1 6380
4.修改完毕,还得修改配置文件,永久生效

2,用哨兵自动选举新主人

2|1redis哨兵:

哨兵功能:

  哨兵进行检测,主从架构是否正常,如果主库挂掉,哨兵会自动的修改redis.conf,进行添加/删除 slaveof 指令

redis哨兵安装配置:

1.准备三个redis实例,一主两从

详见上面redis主从配置

2,准备好了三个数据库实例,启动三个数据库实例

redis-server redis-6379.conf
redis-server redis-6380.conf
redis-server redis-6381.conf

3,准备三个哨兵,开始监控主从架构

准备三个配置文件,哨兵文件

redis-26379.conf

port 26379
dir /var/redis/data/
logfile "26379.log"
sentinel monitor sbmaster 127.0.0.1 6379 2
sentinel down-after-milliseconds qsmaster 30000
sentinel parallel-syncs sbmaster 1
sentinel failover-timeout sbmaster 180000
daemonize yes 

redis-26380.conf

port 26380
dir /var/redis/data/
logfile "26380.log"
sentinel monitor sbmaster 127.0.0.1 6379 2
sentinel down-after-milliseconds qsmaster 30000
sentinel parallel-syncs sbmaster 1
sentinel failover-timeout sbmaster 180000
daemonize yes

redis-26381.conf

port 26381
dir /var/redis/data/
logfile "26381.log"
sentinel monitor sbmaster 127.0.0.1 6379 2
sentinel down-after-milliseconds sbmaster 30000
sentinel parallel-syncs sbmaster 1
sentinel failover-timeout sbmaster 180000
daemonize yes 

4,启动三个哨兵实例

redis-sentinel redis-26380.conf
redis-sentinel redis-26379.conf
redis-sentinel redis-26381.conf 

检查哨兵状态是否正常

只有发现如下信息,与下面一致,即为正常

redis-cli -p 26379 info sentinel

# Sentinel
sentinel_masters:1
sentinel_tilt:0
sentinel_running_scripts:0
sentinel_scripts_queue_length:0
sentinel_simulate_failure_flags:0
master0:name=sbmaster,status=ok,address=127.0.0.1:6380,slaves=2,sentinels=3

5,进行哨兵自动主从切换

1.干掉6379的redis数据库

2.查看6380和6381的身份信息,是否自动的进行主从切换(需等待30秒才会切换)

3.手动启动6379挂掉的数据库,查看是否会被哨兵,添加进信息的主从集群

注意!!如果发现不成功,需删掉所有的哨兵配置文件,从新来过
注意!!如果发现不成功,需删掉所有的哨兵配置文件,从新来过
注意!!如果发现不成功,需删掉所有的哨兵配置文件,从新来过

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,如果有疑问大家可以留言交流,谢谢大家对我们的支持。

(0)

相关推荐

  • Linux中查看指定文件夹内各个子文件夹内的文件数量

    count脚本 #!/bin/sh numOfArgs=$# if [ $numOfArgs -ne 1 ]; then echo -e "Usage: \nbash $0 dirForCount" exit -1 fi # args ROOTDIR=$1 # core part find $ROOTDIR -maxdepth 1 -type d | sort | while read dir; do count=$(find "$dir" -type f | wc

  • Linux加载vmlinux调试

    使用gdb加载内核符号表 arm-eabi-gdb out/target/product/msm8625/obj/KERNEL_OBJ/vmlinux 在内核的.config里面要打开 DEBUG_INFO和DEBUG_VM 定位故障代码 (gdb) l * qrd7627a_add_io_devices+0x100 0xc07cd05c is in qrd7627a_add_io_devices (/home/yejialong/GH700C/kernel/arch/arm/mach-msm/

  • linux系统下的时间配置综述

    一.时间类型分为: 1.网络时间(设置时区,ntp服务器同步的时间) 2.系统时间,当前系统所显示的时间 3.硬件(RTC)时间,主板上面Bios的时间 一般设置为:系统时间与网络时间同步,系统时间写入硬件时间. 二.时间的查看方式: 1.查看硬件时间 #hwclock 2.查看系统时间 date 3.网络时间的更新及查看 #ntpdate xxxxxx xxxxxx为在/etc/ntp.conf文件中设置的时间服务器 四.时间的修改方式 1.系统时间的修改 将时间设置为13点11分03秒 #d

  • linux 搭建svn服务器的方法步骤

    一:安装svn yum install -y subversion 二:创建仓库 1:创建仓库目录 mkdir -p /var/project/test 2:创建仓库 svnadmin create /var/project/test 创建成功后,在/var/project/test目录下如下目录: drwxr-xr-x. 2 root root 51 1月 30 13:26 conf drwxr-sr-x. 6 root root 4096 1月 30 13:26 db -r--r--r--.

  • 自制YUM仓库的步骤讲解

    简单写一写,用作仓库的虚拟机IP为192.168.149.129.我计划将/usr/local/src这个目录下的软件当做YUM源.首先确保http服务正常. 1.我用的是apache,默认根目录是/var/www/html,所以在这个目录下做了一个软链接: [root@bogon html]# ln -s /usr/local/src . [root@bogon html]# ll total 3 lrwxrwxrwx 1 root root 14 Nov 2 11:13 src -> /us

  • linux中各种锁机制的使用与区别详解

    前言: 相信需要了解这方面的知识的小伙伴,已经基本对进程间通信和线程间通信有了一定了解.例如,进程间通信的机制之一:共享内存(在这里不做详解):多个进程可同时访问同一块内存.如果不对访问这块内存的临界区进行互斥或者同步,那么进程的运行很可能出现一些不可预知的错误和结果. 接下来我们了解三种常见的Linux下的互斥操作->锁. 1.互斥锁(mutex) 特点:对于读者和写者来说.只要有一方获取了锁,另一方则不能继续获取,进而执行临界区代码. 创建锁: 有两种方法创建互斥锁,静态方式和动态方式.PO

  • linux中shell的变量的数值计算

    1.expr命令 a=123 expr $a + 10 ##加法 expr $a - 10 ##减法 expr $a \* 10 ##乘法 expr $a / 10 ##除法 expr $a % 10 ##取余 2.$[]和$(())表达式 echo $[a+10] echo $[a-10] echo $[a*10] echo $[a/10] echo $[a%10] echo $((a+10)) echo $((a-10)) 3.let命令(let命令在执行后会保存新的值) let a+=10

  • LINUX中IPTABLES防火墙的基本使用教程

    前言 对于有公网IP的生产环境VPS,仅仅开放需要的端口,即采用ACL来控制IP和端口(Access Control List). 这里可以使用Linux防火墙netfilter的用户态工具 iptables有4种表:raw–>mangle(修改报文原数据)–>nat(定义地址转换)–>filter(定义允许或者不允许的规则) 每个表可以配置多个链: * 对于filter来讲一般只能做在3个链上:INPUT ,FORWARD ,OUTPUT * 对于nat来讲一般也只能做在3个链上:PR

  • Linux下误删messages文件的找回方法

    如果有进程正在使用的文件,如果被误删了,可以找回.如果没有进程在使用,就无法找回被误删的文件了. 假如/var/log/messages文件被误删了: 1.查询正在使用该文件的进程. [root@www]# lsof |grep message rsyslogd 1717 root 1w REG 8,2 243321 654968 /var/log/messages 2.根据查询结果,是PID为1717的进程正在使用该文件.进入该进程/proc下的目录/proc/1717/fd: [root@w

  • Linux内核宏container_of的深度剖析

    1.前面说的 我在好几年前读linux 驱动代码的时候看到这个宏,百度了好久,知道怎么用了,但是对实现过程和原理还是一知半解. container_of宏 在linux内核代码里面使用次数非常非常多,对于喜欢linux编程的同学来说,了解其实现方法,对以后看内核代码,写内核驱动的帮助都非常大,当然,我不是说了解这个就可以为所欲为了,内核博大精深,先宏观再微观去学习,不积跬步何以致千里,不要想着一口就能吃成一个胖子,我这篇文章主要剖析一下这个函数的实现原理,希望对大家学习过程中有所帮助. andr

随机推荐