当前位置: 首页 > news >正文

异地容灾系统和数据仓库中数据同步的设计软件的功能模型

1)初始同步模块
该模块主要是在表进行初始同步时使用的;它能够根据实际需要生成物化视图
及其索引的创建语句,并完成表的初始同步。如果没有特别的要求,则调用普通初
始同步子模块进行目的端表的初始同步,创建语句将从源数据库获取;如果有特别
的要求,如按指定的分区初始同步或者按照一定的条件进行初始同步,则会根据这
些要求调用分区初始同步或条件初始同步子模块生成特定的创建语句来进行目的端
表的初始同步。该模块能够批量自动进行表的初始同步,从而大大减少了人工干 预,
保证了初始同步的准确性和自动化。
2)调度模块
由于源端的数据在时刻变化着,在初始同步模块的基础上需要有一个调度模块
将这些不断变化的数据同步到目的端,使目的端与源端始终保持数据一致性。该模
块中的增量调度子模块是在表的增量同步过程中使用的,并能根据刷新间隔要求对
目的端表进行及时准确的刷新;完全刷新调度子模块是在对表进行重新同步时使
用;特殊要求调度模块是给需要做特殊同步的表使用的,如需要暂时停止同步、在
每天的固定时间不同步等。
3)监控模块
该模块是为了及时发现同步中断和同步效率低的表。由于其告警方式为短信告
警,可以实现任何时间、任何地点的告警,保证了能在第一时间发现同步的中断以
及同步效率低下的情况,实现了异常处理的及时性。
4)错误处理模块
该模块主要是处理同步刷新过程中出现的各种错误。通过对捕获的错误进行相
应的处理,从而保证同步能够稳定、高效地运行。另外,由于 Oracle 高级复制技
术自身存在一定的缺陷,需要使用该模块来捕获造成数据不准的源头,并进行相应
的处理。
5)优化模块
该模块主要是处理同步过程中出现的性能瓶颈,保证能够及时发现性能问题并
采取相应的优化手段来加以维护,包括源端优化和目的端优化。

http://www.lryc.cn/news/161893.html

相关文章:

  • 分布式调度 Elastic-job
  • 第 2 章 线性表(学生健康登记表实现)
  • 第三周晨考自测(3.0)
  • C++ 结构体
  • 如何使用聊天GPT自定义说明
  • mac pyenv无法切换python版本问题
  • API接口接入电商平台案例,采集淘宝天猫拼多多1688京东LAZADA数据按关键字搜索商品示例
  • 持安-大连万达集团零信任项目入选中国信通院2023零信任优秀案例
  • python28种极坐标绘图函数总结
  • C#编程基础(万字详解,这一篇就够了)
  • SpringBoot中自定义注解
  • 《TCP/IP网络编程》阅读笔记--地址族和数据序列
  • 【C++】可变参数模板
  • WPF Flyout风格动画消息弹出消息提示框
  • Spring Boot 集成 Redis
  • Java线程之间通信方式
  • 【LeetCode-中等题】367. 有效的完全平方数
  • 英语单词(二)
  • Django 用相对路径方式引用自定义模块 或 文件
  • 企业架构LNMP学习笔记22
  • uniapp和小程序设置tabBar和显示与隐藏tabBar
  • 物联网、无线通讯
  • Pod和容器设计模式
  • docker系列(3) - 常用软件安装
  • Apache Hive之数据查询
  • OpenCV---视频操作
  • 《TCP/IP网络编程》阅读笔记--进程间通信
  • mysql中show status参数介绍
  • Tomcat服务的部署及配置优化
  • 入门力扣自学笔记279 C++ (题目编号:1123)