当前位置: 首页 > news >正文

Keettle (pdi-ce) 整库多表迁移(避坑)

使用开源免费 Keettle 工具

1.下载与安装

官网地址:下载

下载9.3.0以上的,6.17.1我都尝试过,6.1导致很多莫名其妙问题,7.1数据库可以连接和预览,迁移的时候就会出现事务读问题,最后解决这个问题后,还会在迁移成功迁移了空记录。

所以直接上9.3省事。

2. 源、目标数据库环境

2.1 前期准备

准备好驱动版本、对应驱动的url链接、数据库名和具有读写权限的用户

2.2 前期操作

Keettle解压好后,先不急着打开,先将需要的源数据库和目标数据库驱动放到keettle(更名为了pdi-ce

image-20230301104401304

2.2 迁移准备

源数据库和目标数据库准备

image-20230301105307655

3. 数据库多表创建和复制

3.1 作业创建

设置完DB连接中源数据库和目标数据库后

接着找到菜单栏工具,依次进入工具- > 向导 -> 复制多表向导

毕竟是迁移数据库,如果单表就没必要这么麻烦了,所以单表步骤在复制单表向导,文章只讲多表。

image-20230301104620779

将刚刚创建好的DB连接选择源数据库和目标数据库

image-20230301105421121

接着可以多表选择哪些要创建和复制的,双击或者点击右箭头

image-20230301105547693

完成后,就会生成作业,如图

image-20230301104907063

如果你不想复制,就把右边复制作业删除,把创建作业进行连接,鼠标点击图标后不动,接着选择右边第一个图标

image-20230301124547350

3.2 检查建表SQL

3.3 放第三步是因为,作业是按顺序执行的,一个作业中断前面作业不会回滚,中断作业之后的不会执行,所以再次执行就会异常。

为了方便大家顺畅地做好数据库迁移工作,所以这里特意提醒一下:

  • 建议检查每个建表语句中的时间戳字段

一般在MySQL建表语句都需要设置默认值

timestamp TIMESTAMP # 修改前语句
timestamp TIMESTAMP null default CURRENT_TIMESTAMP # 修改后语句
  • 如果手动更改节点麻烦

你可以更改建表语句,添加上if not exists,这样其实也挺麻烦

create table if not exists [Table]

3.3 执行作业

image-20230301105700797

http://www.lryc.cn/news/24894.html

相关文章:

  • 搭建私人《我的世界》服务器,使用Cpolar内网穿透更简单
  • map和set的使用
  • 常用正则表达式大全
  • 注意,摸鱼程序员常用的9个小技巧,早点下班不秃头
  • 【Linux】文件时间-ACM
  • [架构之路-124]-《软考-系统架构设计师》-操作系统-3-操作系统原理 - IO设备、微内核、嵌入式系统
  • 【竞赛/TPU】算能TPU编程竞赛总结
  • Substrate 基础教程(Tutorials) -- 模拟网络 添加可信节点
  • SAP 设置无物料号的费用采购
  • k8s ConfigMap 中 subPath 字段和 items 字段
  • UML建模
  • JavaScript常见面试题(更新中)
  • TCP/IP协议
  • Python使用异步线程池实现异步TCP服务器交互
  • matplotlib常用操作
  • 二分算法题
  • Vue+ElementUI+SpringBoot项目配合分页插件快速实现分页(简单暴力)
  • 【回眸】牛客网刷刷刷!嵌入式软件中也会遇到的嵌入式硬件,通讯,通讯协议专题(一)
  • 使用Vue展示数据(动态查询)
  • 构建数据库测试数据——mysql
  • 你想要的Android性能优化系列:启动优化 !
  • python3的基础入门3:基本数据类型
  • 消息队列原理与实战-学习笔记
  • Linux权限相关知识(大量图文展示,及详细操作)
  • Ep_操作系统面试题-什么是协程
  • 在C#中使用互斥量解决多线程访问共享资源的冲突问题
  • JavaEE进阶第六课:SpringBoot配置文件
  • MySQL基础(一)SQL分类、导入、SELECT语句,运算符
  • 反激与正激的区别
  • 王道操作系统课代表 - 考研计算机 第四章 文件管理 究极精华总结笔记