当前位置: 首页 > news >正文

redis的分片集群模式

redis的分片集群模式

1 主从哨兵集群的问题和分片集群特点

主从哨兵集群可应对高并发写和高可用性,但是还有2个问题没有解决:
(1)海量数据存储
(2)高并发写的问题
使用分片集群可解决,分片集群的特点:
(1)集群中有多个master,每个master保存不同的数据。(实现海量数据存储)
(2)每个master都可以有多个slave节点。(实现高并发读)
(3)master之间通过ping检测彼此健康状态。(替代主从集群中的哨兵,多个master认为某个master客观下线,可在每个master和自己的slave节点之间进行主从切换,满足高可用性)
(4)客户端请求(redisTemplate)可以访问集群任意节点,最终都会被转发到正确的节点。

在这里插入图片描述

2 搭建redis分片集群

分片集群需要的节点数较多,搭建一个最小的分片集群,包含3个master节点,每个master节点包含一个slave节点。采用一主一从模式,总共3个master和3个slave节点。
可在同一个虚拟机中开启6个redis实例,模拟分片集群。

编写redis.conf文件:
在这里插入图片描述

(1)分别启动6个redis

(2)创建集群

# 分片集群操作相关的命令
redis-cli --cluster help# 创建集群
redis-cli --cluster create --cluster-replicas 1 节点ip:端口号  节点ip2:端口号   ......  节点ip6:端口号

create:创建集群
–cluster-replicas 1:指定集群中每个master的副本个数为1,节点总数(6)除以(1+1)= 3 ,说明maste的数量为3,因此节点列表的前3个就是master节点,其余是slave节点,随机分配到不同的master上。

# 查看集群状态
redis-cli -p 端口号 cluster nodes
## 展示各个节点

在这里插入图片描述

3 分片集群中的散列插槽

散列插槽(设计目的:有利于数据的转移)

redis会把每一个master节点映射到0~16383共16384个插槽(hash slot)上,查看集群信息时就能看到:(每一个master节点都会占用一部分的插槽)。
数据key不是与节点绑定的,而是与插槽绑定。redis会根据key的有效部分计算出插槽值,有以下2种情况:
(1)key中包含“{}”,且“{}”中至少包含1个字符,“{}”中的部分是有效部分
(2)key中不包含“{}”,整个key都是有效部分。

例如:key是num,就会根据num计算;如果是{itcast}num,则根据itcast计算。计算方式是利用CRC16算法得到一个hash值,然后对16384取余(取余的结果始终在0~16383中间),得到的结果就是slot值。

# 使用集群模式  连接redis,set值(-c)
redis-cli -c -p 7001

set a 1的时候 a的计算结果的slot(插槽)等于15495,会自动跳转到存储到这个redis的散列插槽中。
在这里插入图片描述

如何实现将某一类数据都存储到指定的redis的主节点上

这一类数据可以使用相同的有效部分,例如key都以{typeId}为前缀。

4 分片集群中的集群伸缩

集群伸缩:增加和删除集群中节点

向集群中增加一个新的master节点,并向num=10

需求:
将已有的那个redis实例的插槽移动到新增master节点的插槽中,将已有的那个redis实例下线(如:服务器老登)

# 
redis-cli --cluster --help
# 默认是master节点,当然再在后面使用指定是master还是slave以及是谁的slave,添加新的redis实例节点默认是没有插槽值的 (在connected后面的是slot插槽)
redis-cli --cluster add-node 新增节点的ip:端口号 redis分片集群中已有的ip:端口号
# 重新分片 reshard 从其他节点的插槽中移到指定节点的部分插槽值   按照提示一步一步操作  注意填入redis实例的id(可使用cluster nodes查看)
redis-cli --cluster reshard

5 分片集群中的故障转移

其中一个master宕机(可以主动停机)–自动故障转移

# 停机后 该节点断开连接  从节点变为master节点  该节点重启后,变为slave节点
redis-cli -p 端口号 shutdown

手动故障转移(一个redis实例节点服务器老旧需要升级)–数据迁移

将某个slave节点机器替换现在的master节点
在slave节点的机器上执行cluster failover命令

# 可让当前slave节点成为master节点,之前的master节点变为slave节点
cluster failover

6 redisTemplate访问分片集群

(1)引入redis的starter依赖

(2)配置文件中配置redis分片集群的每个节点的地址

在这里插入图片描述

(3)配置主从读写分离

http://www.lryc.cn/news/529151.html

相关文章:

  • Kiwi 安卓浏览器本月停止维护,扩展功能迁移至 Edge Canary
  • 我的AI工具箱Tauri+Django内容生产介绍和使用
  • 四.4 Redis 五大数据类型/结构的详细说明/详细使用( zset 有序集合数据类型详解和使用)
  • Java---猜数字游戏
  • 网站快速收录:利用RSS订阅提升效率
  • vue3第三部分--组件通信
  • DeepSeek R1-Zero vs. R1:强化学习推理的技术突破与应用前景
  • matlab提取滚动轴承故障特征
  • 数据结构与算法学习笔记----容斥原理
  • Java 知识速记:全面解析 final 关键字
  • (笔记+作业)书生大模型实战营春节卷王班---L0G2000 Python 基础知识
  • 9、Docker环境安装Nginx
  • 受击反馈HitReact、死亡效果Death Dissolve、Floating伤害值Text(末尾附 客户端RPC )
  • 572. 另一棵树的子树
  • MATLAB中textBoundary函数用法
  • vue3的路由配置
  • 在彼此的根系里呼吸
  • 深入理解若依RuoYi-Vue数据字典设计与实现
  • 深入MapReduce——从MRv1到Yarn
  • Flutter_学习记录_Tab的简单Demo~真的很简单
  • CSS核心
  • Deepseek本地部署(ollama+open-webui)
  • PaddleSeg 从配置文件和模型 URL 自动化运行预测任务
  • 数据结构 队列
  • Cocoa和Cocoa Touch是什么语言写成的?什么是Cocoa?编程语言中什么是框架?为什么苹果公司Cocoa类库有不少NS前缀?Swift编程语言?
  • 登录管理——认证方案(JWT、拦截器、ThreadLocal、短信验证)
  • Java实现LFU缓存策略实战
  • 物业系统改革引领行业智能化管理与提升服务质量的新征程
  • QT+mysql+python 效果:
  • 动手学图神经网络(4):利用图神经网络进行图分类