当前位置: 首页 > news >正文

node.js中实现MySQL的增量备份

有时候,我们需要对生产库进行备份,不要求实时性很高,大概每天一次就行,为性能考虑,只备份最新更改内容,即增量备份即可,这种场景下对DB的设计和备份语句有所要求。
首先要求按源表各字段定义目标表。
源表要有主键,没有主键的要增加一个自增ID来充当主键。
目标表跟源表一样定义主键,如果源表有自增字段,目标表取消该字段自增属性。
我们不仅要考虑新增记录,还要考虑记录的修改。要在源表中包含数据新增或者修改的时间属性字段。这样可以筛选出需要增量备份的记录。
可以采用insert into on duplicate key update方式来执行添加或修改。
示例代码如下:

const getdata = 'select * from demotable where createtime> ? or modifytime> ?';
const incbackupcmd = 'insert into demotable(...) values ? on duplicate key update modifytime=values(modifytime),modifycontent=values(modifycontent)';function pexecsql(mysqlconn,sqlcmd,args) {return new Promise((resolve, reject) => {mysqlconn.query(sqlcmd,args,(err,results)=> { if (err) { errlog(jstrerr(err)); reject(err); }else { resolve({"rows":results}); }}); });}
pexecsql(srcpool,getdata,[syncdb.lastsynctime,syncdb.lastsynctime]).then(res=>{if (res.rows.length>0) {let dataset=res.rows.map(item=>Object.values(item)); pexecsql(destpool,incbackupcmd,[dataset]).then(..
http://www.lryc.cn/news/494980.html

相关文章:

  • Java线程池提交任务流程底层源码与源码解析
  • 新型大语言模型的预训练与后训练范式,Meta的Llama 3.1语言模型
  • 硬菜3道+馒头
  • YOLO系列论文综述(从YOLOv1到YOLOv11)【第14篇:YOLOv11——在速度和准确性方面具有无与伦比的性能】
  • 【Spring】聊聊@EventListener注解原理
  • LangChain——HTML文本分割 多种文本分割
  • 梯度爆炸与消失
  • 关于扩散方程的解
  • 如何监控Elasticsearch集群状态?
  • 关于音频 DSP 的接口种类以及其应用场景介绍
  • arkTS:持久化储存UI状态的基本用法(PersistentStorage)
  • css—动画
  • YOLO系列论文综述(从YOLOv1到YOLOv11)【第12篇:YOLOv9——可编程梯度信息(PGI)+广义高效层聚合网络(GELAN)】
  • 【ETCD】etcd简单入门之基础操作基于etcdctl进行操作
  • 第六届国际科技创新(IAECST 2024)暨第四届物流系统与交通运输(LSTT 2024)
  • 20241127 给typecho文章编辑附件 添加视频 图片预览
  • vue3使用monaco编辑器(VSCode网页版)
  • Spark优化--开发调优、资源调优、数据倾斜调优和shuffle调优等
  • Day1 生信新手笔记
  • Python的秘密基地--[章节2]Python核心数据结构
  • 【Electron学习笔记(三)】Electron的主进程和渲染进程
  • [免费]SpringBoot+Vue景区订票(购票)系统【论文+源码+SQL脚本】
  • idea_工程与模块管理
  • A02、Java 设计模式优化
  • jdk8没有Buffer.put()
  • Artec Leo:航海设备维护的便携式3D扫描利器【沪敖3D】
  • HCIA笔记6--路由基础
  • 说说Elasticsearch拼写纠错是如何实现的?
  • Ubuntu20.04运行R-VIO2
  • 【软件项目测试文档大全】软件测试方案,验收测试计划,验收测试报告,测试用例,集成测试,测试规程和指南,等保测试(Word原件)