博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
打不死的redis集群
阅读量:5887 次
发布时间:2019-06-19

本文共 4533 字,大约阅读时间需要 15 分钟。

hot3.png

最近遇到部分系统因为redis服务挂掉,导致部分服务不可用。所以希望搭建一个redis集群镜像,把原先散落各处的redis服务器统一管理起来,并且保障高可用和故障自动迁移。

打不死的redis集群打不死的redis集群

一 redis集群分类

大家都知道redis集群有两种,一种是redis sentinel,高可用集群,同时只有一个master,各实例数据保持一致;一种是redis cluster,分布式集群,同时有多个master,数据分片部署在各个master上。基于我们的需求和redis本身技术的成熟度,本次要搭建的是redis sentinel。

Redis 的 Sentinel 系统用于管理多个 Redis 服务器(instance), 该系统执行以下三个任务:

  • 监控(Monitoring): Sentinel 会不断地检查你的主服务器和从服务器是否运作正常。
  • 提醒(Notification    : 当被监控的某个 Redis 服务器出现问题时, Sentinel 可以通过 API 向管理员或者其他应用程序发送通知。
  • 自动故障迁移(Automatic failover): 当一个主服务器不能正常工作时, Sentinel 会开始一次自动故障迁移操作, 它会将失效主服务器的其中一个从服务器升级为新的主服务器, 并让失效主服务器的其他从服务器改为复制新的主服务器; 当客户端试图连接失效的主服务器时, 集群也会向客户端返回新主服务器的地址, 使得集群可以使用新主服务器代替失效服务器。

二制作镜像

整个集群可以分为一个master,N个slave,M个sentinel,本次以2个slave和3个sentinel为例:

打不死的redis集群打不死的redis集群
首先增加redis.conf

##redis.conf ##redis-0,默认为masterport $redis_port ##授权密码,请各个配置保持一致 ##暂且禁用指令重命名 ##rename-command ##开启AOF,禁用snapshotappendonly yes #slaveof redis-master $master_portslave-read-only yes

默认为master,#slaveof注释去掉后变为slave,这里固化了master的域名redis-master。

增加sentinel.conf

port $sentinel_portdir  "hljs-string""/tmp" ##sentinel监控的redis的名字、IP和端口,最后一个数字是sentinel做决策的时候需要投赞同票的最少的sentinel的数量。sentinel "hljs-instruction" monitor mymaster redis-master $master_port 2 ##选项指定了在执行故障转移时, 最多可以有多少个从服务器同时对新的主服务器进行同步, 这个数字越小, 完成故障转移所需的时间就越长。sentinel config-epoch mymaster 1sentinel leader-epoch mymaster 1sentinel current-epoch 1

增加启动脚本,根据入参判断启动master,slave,sentinel

cd /dataredis_role= "hljs-variable"$1echo  "hljs-variable"$redis_role if [  "hljs-variable"$redis_role =  "hljs-string""master" ] ;  then    echo  "hljs-string""master"     sed -i  "hljs-string""s/\$redis_port/ "hljs-variable"$redis_port/g" redis.conf    redis-server /data/redis.conf elif [  "hljs-variable"$redis_role =  "hljs-string""slave" ] ;  then       echo  "hljs-string""slave"     sed -i  "hljs-string""s/\$redis_port/ "hljs-variable"$redis_port/g" redis.conf    sed -i  "hljs-string""s/#slaveof/slaveof/g" redis.conf    sed -i  "hljs-string""s/\$master_port/ "hljs-variable"$master_port/g" redis.conf    redis-server /data/redis.conf elif [  "hljs-variable"$redis_role =  "hljs-string""sentinel" ] ;  then     echo  "hljs-string""sentinel"     sed -i  "hljs-string""s/\$sentinel_port/ "hljs-variable"$sentinel_port/g" sentinel.conf    sed -i  "hljs-string""s/\$master_port/ "hljs-variable"$master_port/g" sentinel.conf    redis-sentinel /data/sentinel.conf else     echo  "hljs-string""unknow role!"  fi      #ifend

其中$redis_port和$master_port,$sentinel_port都是取自环境变量,通过Docker启动时候传入。

编写Dockerfile

FROM redis:3-alpineMAINTAINER voidman voidmanCOPY  "bash"Shanghai /etc/localtimeCOPY  "bash"redis.conf /data/redis.confCOPY  "bash"sentinel.conf /data/sentinel.confCOPY  "bash"start.sh /data/start.shRUN  "bash"chmod +x /data/start.shRUN  "bash"chown redis:redis /data/*ENTRYPOINT  "bash"[ "hljs-string""sh", "hljs-string""/data/start.sh"] CMD  "bash"[ "hljs-string""master"]

选取redis-alpine镜像作为基础镜像,因为它非常小,只有9M,修改时区和把一些配置拷贝进去后,变更下权限和用户组,因为基础镜像是redis用户组。ENTRYPOINT和CMD组合,默认以master方式启动。

build完成后,镜像只有15M。

三 启动

采用docker-compose格式:

redis-master-host:  environment:    redis_port:  "hljs-string"'16379'  labels:    io "hljs-class".rancher "hljs-class".container "hljs-class".pull_image: always  tty: true  image: xxx "hljs-class".aliyun "hljs-class".com:5000/aegis-redis-ha:1.0  stdin_open: true  net: hostredis-slaves:  environment:    master_port:  "hljs-string"'16379'    redis_port:  "hljs-string"'16380'  labels:    io "hljs-class".rancher "hljs-class".scheduler "hljs-class".affinity:container_label_soft_ne: name=slaves    io "hljs-class".rancher "hljs-class".container "hljs-class".pull_image: always    name: slaves  tty: true  command:  - slave  image: xxx "hljs-class".aliyun "hljs-class".com:5000/aegis-redis-cluster:1.0  stdin_open: true  net: hostredis-sentinels:  environment:    master_port:  "hljs-string"'16379'    sentinel_port:  "hljs-string"'16381'  labels:    io "hljs-class".rancher "hljs-class".container "hljs-class".pull_image: always    name: sentinels    io "hljs-class".rancher "hljs-class".scheduler "hljs-class".affinity:container_label_ne: name=sentinels  tty: true  command:  - sentinel  image: xxx "hljs-class".aliyun "hljs-class".com:5000/aegis-redis-cluster:1.0  stdin_open: true  net: host

首先启动master,传入端口16379,host模式,在启动slave,成为16379 master 的slave,并且设置调度策略为尽可能分散的方式,sentinels也类似。

五 总结

总的来说,只要集群中有一台redis实例存活,集群就能对外提供服务,而sentinel只会在master或slave挂掉才会有实际的作用。

这次的镜像大小只有15M,非常小。采用启动时配置角色和端口,包括master,slave,和sentinel3个角色,通过服务编排启动一个redis集群。

免费提供最新Linux技术教程书籍,为开源技术爱好者努力做得更多更好:http://www.linuxprobe.com/

转载于:https://my.oschina.net/linuxprobe/blog/756789

你可能感兴趣的文章
浮动层代码
查看>>
1.安装zabbix server
查看>>
mongodb相关(单实例、复制集、分片集)
查看>>
tcp实现聊天系统
查看>>
快速排序的总结
查看>>
聊聊eureka server的RemoteRegionRegistry
查看>>
Linux系统详细启动流程
查看>>
19.7 主动模式和被动模式 19.8 添加监控主机 19.9 添加自定义模板 19.10 处理图形...
查看>>
20.20 告警系统主脚本 20.21 告警系统配置文件 20.22 告警系统监控项目
查看>>
openstackM centos7 多节点安装 Packstack –answer-file方式
查看>>
Web前端面试指导(四):面试前准备-有备而去百战百胜
查看>>
C#.NET 大型通用信息化系统集成快速开发平台 4.0 版本 - 标准省市县数据的公司选择窗口实现...
查看>>
Tomcat学习(一)
查看>>
数学建模模板
查看>>
php include 语句包含文件时,浏览器多出换行
查看>>
配置yum 源
查看>>
运维打印机篇
查看>>
JUNIPER MX PPPOE拨号实验2.0
查看>>
二叉排序树的查找
查看>>
网络运维必备(2)
查看>>