当前位置: 首页 > news >正文

Redis_写时复制(cow)

Redis会根据配置,每隔一段时间中对Redis服务中当下的数据集进行快照。配置自动生成rdb文件,后台使用的是bgsave方式。

save 60 1000 //关闭RDB只需要将所有的save保存策略注释掉即可

Redis借助操作系统提供的写时复制技术(Copy-On-Write, COW),在生成快照的同时,依然可以正常处理写命令。具体原理看下文介绍。

bgsave流程

  1. Fork子进程:
  • 主进程调用fork() 创建一个子进程。
  • 子进程和主进程共享相同的内存空间。
  1. 子进程生成RDB文件:
  • 子进程根据fork时刻的数据快照生成RDB文件。
  • 子进程只读取fork时刻的数据,不会读取之后的新数据。
  1. 主进程继续处理写操作:
  • 主进程继续处理客户端发来的写操作。
  • 对于写操作,主进程使用写时复制(Copy-On-Write, COW)机制,修改的数据所在的页,复制一份,将新数据写入新的内存区域。
  1. 替换现有RDB文件:
  • 子进程完成RDB文件生成后,通知主进程。
  • 主进程将临时文件重命名为正式的RDB文件。

对新写入数据的处理

  1. Fork时刻的数据快照:
  • 子进程生成的RDB文件包含了 fork 时刻的数据快照。
  • 这意味着从fork时刻到RDB文件生成完成这段时间内的新写入数据不会被包含在当前RDB文件中。
  1. 新写入数据的处理:
  • 主进程在fork之后接收到的所有写操作都会被记录在内存中。
  • 这些新写入的数据会存储在新的内存区域中,不会影响子进程生成的RDB文件。

示例说明

假设主进程在 fork 时刻的状态如下:

Key: "foo" Value: "bar"
  • Fork 子进程:
    子进程和主进程共享内存中的 “foo”: “bar”。
  • 主进程写操作:
    主进程接收到一个写操作:SET foo baz。
  • 写时复制:
    主进程为 “foo” 分配新的内存空间,并将值从 “bar” 改为 “baz”。
    此时内存状态变为:
Key: "foo" Value: "bar"  // 子进程可见
Key: "foo" Value: "baz"  // 主进程可见  
  • 子进程生成RDB文件:
    子进程读取 “foo”: “bar” 并生成RDB文件。
  • 替换现有RDB文件:
    子进程完成RDB文件生成后,主进程用新的RDB文件替换旧文件。

后续处理

新RDB文件生成:

下一次执行 bgsave 时,新的RDB文件将会包含最新的数据快照,包括之前写入的数据。

AOF日志:

如果Redis配置了AOF(Append Only File)持久化模式,所有写操作都会被记录在AOF文件中。
即使RDB文件不包含最新的数据,AOF文件也会确保数据的一致性和完整性。

总结

  • RDB快照:bgsave 生成的是 fork 时刻的数据快照,不包含fork之后的新写入数据。
  • 写时复制:主进程在 fork 之后的新写入数据会存储在新的内存区域中。
  • 后续处理:下一次 bgsave 会包含最新的数据快照。
  • AOF日志:如果启用AOF模式,所有写操作都会被记录在AOF文件中,确保数据的一致性和完整性。
    这种方式保证了RDB文件的一致性和高可用性,同时也提供了AOF模式作为补充,确保数据的完整性和一致性。

欢迎关注:鲁班曰

参考文献

Redis写时拷贝(COW)总结
Redis的写时复制(Copy On Write),你真的了解么?

http://www.lryc.cn/news/470393.html

相关文章:

  • 【mysql进阶】4-5. InnoDB 内存结构
  • 从零入门扣子Bot开发
  • 中药是怎么计价的 复制药方文本划价系统操作教程
  • 怎么做网站?
  • Centos Stream 9部署Zabbix7.0LTS
  • 深入理解Allan方差:用体重数据分析误差的时间尺度与稳定性
  • Elasticsearch 解析:倒排索引机制/字段类型/语法/常见问题
  • 数字后端零基础入门系列 | Innovus零基础LAB学习Day5
  • Redis 内存回收策略小结
  • React常用前端框架合集
  • python对文件的读写操作
  • Redis工具类(解决缓存穿透、缓存击穿)
  • Air780E量产binpkg文件的获取方法
  • C++STL之stack
  • git的学习之远程进行操作
  • 蓝桥杯普及题
  • Spreadsheet导出excel
  • Leetcode|454.四数相加II ● 383. 赎金信 ● 15. 三数之和 ● 18. 四数之和
  • 使用ceph-csi把ceph-fs做为k8s的storageclass使用
  • 太速科技-212-RCP-601 CPCI刀片计算机
  • 【解决 Windows 下 SSH “Bad owner or permissions“ 错误及端口转发问题详解】
  • 使用预训练的BERT进行金融领域问答
  • ReactOS系统中MM_REGION结构体的声明
  • web相关知识学习笔记
  • App测试环境部署
  • 【论文阅读】Tabbed Out: Subverting the Android Custom Tab Security Model
  • 2025 - AI人工智能药物设计 - 中药网络药理学和毒理学的研究
  • iwebsec靶场 XSS漏洞通关笔记
  • 设计模式-单例模型(单件模式、Singleton)
  • 笔记本双系统win10+Ubuntu 20.04 无法调节亮度亲测解决