redis主从复制和集群配置-创新互联
配置Redis主从复制和集群配置详解
目前创新互联公司已为上1000+的企业提供了网站建设、域名、虚拟主机、网站托管维护、企业网站设计、科尔沁右翼中网站维护等服务,公司将坚持客户导向、应用为本的策略,正道将秉承"和谐、参与、激情"的文化,与客户和合作伙伴齐心协力一起成长,共同发展。1. 配置redis主从复制。
1.1. 应用场景
一般来说,要将Redis运用于工程项目中,只使用一台Redis是万万不能的,原因如下:
a) 从结构上,单个Redis服务器会发生单点故障,并且一台服务器需要处理所有的请求负载,压力较大;
b) 从容量上,单个Redis服务器内存容量有限,就算一台Redis服务器内存容量为256G,也不能将所有内存用作Redis存储内存,一般来说,单台Redis大使用内存不应该超过20G。
1.2. 基本原理
电商网站上的商品,一般都是一次上传,无数次浏览的,说专业点也就是"多读少写"。
对于这种场景,我们可以使如下这种架构:
1.3. 详细配置
1) 规划主备网络信息,主机192.168.153.164 备机192.168.153.165.保证两台机器互联。
画图说明
2) 安装redis,并配置,可以参考前天的redis安装步骤。
a) 修改yum源,增加redis的yum配置
b) yum install epel-release -y yum install redis -y
c) 修改配置文件/etc/redis.conf
3) 修改备机配置在备机192.168.153. 165的redis.conf中加下面配置
4) slaveof 192.168.153. 164 6379
5) 测试效果
a) 在主机上设值chenjian=666
b) 在备机上取值get chenjian,正常显示
c) 注意点:要保证主机先启动。
1.4. redis主从复制的特点。
通过主从复制可以允许多个slave server拥有和master server相同的数据库副本。下面是关于redis主从复制的一些特点
a) master可以有多个slave
b) 除了多个slave连到相同的master外,slave也可以连接其他slave形成图状结构
c) 主从复制不会阻塞master。也就是说当一个或多个slave与master进行初次同步数据时,master可以继续处理client发来的请求。相反slave在初次同步数据时则会阻塞不能处理client的请求。
d) 主从复制可以用来提高系统的可伸缩性,我们可以用多个slave 专门用于client的读请求,比如sort操作可以使用slave来处理。也可以用来做简单的数据冗余
e) 可以在master禁用数据持久化,只需要注释掉master 配置文件中的所有save配置,然后只在slave上配置数据持久化。
2. 配置redis集群
2.1. 应用场景
当主备复制场景,无法满足主机的单点故障时,需要引入集群配置。
2.2. 基本原理
哨兵选举机制,如果有半数节点发现某个异常节点,共同决定改异常节点的状态,如果该节点是主节点,对应的备节点自动顶替为主节点。Sentinel(哨兵)是Redis 的高可用性解决方案:由一个或多个Sentinel 实例 组成的Sentinel 系统可以监视任意多个主服务器,以及这些主服务器属下的所有从服务器,并在被监视的主服务器进入下线状态时,自动将下线主服务器属下的某个从服务器升级为新的主服务器。
2.3. 详细配置
1) 步骤一,规划网络。
用一台虚拟机模拟6个节点,一台机器6个节点,创建出3 master、3 salve 环境。虚拟机是 CentOS6.9 ,ip地址192.168.153.164
2) 步骤二,下载redis的源码包
wget http://download.redis.io/releases/redis-3.2.11.tar.gz将包中的 redis-trib.rb 复制到 /usr/local/bin 目录下
3) 步骤三, 创建 Redis 节点
首先在 192.168.153.164 机器上 /usr/local 目录下创建 redis_cluster 目录;
mkdir redis_cluster
在 redis_cluster 目录下,创建名为7001、7002,7003、7004、7005,7006的目录,
mkdir 7001 7002 7003 7004 7005 7006
并将 redis.conf 拷贝到这三个目录中,拷贝之前,先修改redis.conf
redis.conf文件按照下面8项修改内容,然后分别拷贝到6个不同的目录7001,7002,7003,7004,7005,7006中。
port 7000 //端口7000,7002,7003
bind 本机ip //默认ip为127.0.0.1 需要改为其他节点机器可访问的ip 否则创建集群时无法访问对应的端口,无法创建集群
daemonize yes //redis后台运行
pidfile /var/run/redis_7000.pid //pidfile文件对应7000,7001,7002
cluster-enabled yes //开启集群 把注释#去掉
cluster-config-file nodes_7000.conf //集群的配置 配置文件首次启动自动生成 7000,7001,7002
cluster-node-timeout 15000 //请求超时 默认15秒,可自行设置
appendonly yes //aof日志开启 有需要就开启,它会每次写操作都记录一条日志
4) 步骤四,启动各个节点
redis-server /usr/local/redis_cluster/7001/redis.conf
redis-server /usr/local/redis_cluster/7002/redis.conf
redis-server /usr/local/redis_cluster/7003/redis.conf
redis-server /usr/local/redis_cluster/7004/redis.conf
redis-server /usr/local/redis_cluster/7005/redis.conf
redis-server /usr/local/redis_cluster/7006/redis.conf
检查节点启动状态
5) 步骤五,创建集群
创建集群的命令:
/usr/local/bin/redis-trib.rb create --replicas 1 192.168.153.164:7001 192.168.153.164:7002 192.168.153.164:7003 192.168.153.164:7004 192.168.153.164:7005 192.168.153.164:7006
此错误是操作系统没有安装ruby
解决方法:安装ruby
yum -y install ruby ruby-devel rubygems rpm-build
gem install redis 报错
##升级ruby
gpg2 --keyserver hkp://keys.gnupg.net --recv-keys D39DC0E3
curl -L get.rvm.io | bash -s stable
source /usr/local/rvm/scripts/rvm
rvm list known
rvm install 2.3.3
rvm use 2.3.3
rvm use 2.3.3 --default
ruby --version
再次执行,成功!
gem install redis
6) 验证集群
redis-cli -c -h 192.168.153.164 -p 7001 其中-c表示以集群方式连接redis,-h指定ip地址,-p指定端口号
保存数据,chenjian保存到12007的槽位,12007所在的节点是7003端口对应的节点。
在其他节点,例如7006上获取chenjian。
验证主节点异常时,备节点自动顶替主节点
杀死7002对应的进程,即让主节点7002异常,检查7005是否顶替成为主节点。
2.4. 集群的特点(1)所有的redis 节点彼此互联(PING-PONG 机制),内部使用二进制协议优化传输速度和带宽; (2)节点的fail 是通过集群中超过半数的节点检测失效时才生效; (3)客户端与redis 节点直连,不需要中间proxy 层。客户端不需要连接集群所有节点,连接集群中任何一 个可用节点即可; (4)redis-cluster把所有的物理节点映射到[0-16383]个slot(哈希槽)上,cluster 负责维护 node<->slot<->value 。
2.5. 集群选举容错
(1):什么时候整个集群不可用(cluster_state:fail)? A:如果集群任意master 挂掉,且当前master 没有slave。集群进入fail 状态,也可以理解成集群的 slot 映射[0-16383]不完整时进入fail 状态。 ps : redis-3.0.0.rc1 加入 cluster-require-full- coverage 参数,默认关闭,打开集群兼容部分失败; B:如果集群超过半数以上master 挂掉,无论是否有slave集群进入fail 状态。ps:当集群不可用时, 所有对集群的操作做都不可用,收到((error) CLUSTERDOWN The cluster is down)错误。
另外有需要云服务器可以了解下创新互联cdcxhl.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。
文章名称:redis主从复制和集群配置-创新互联
本文URL:http://ybzwz.com/article/ddcpod.html