当前位置: 首页 > news >正文

Excel导入数据库-01.构思

系列文件目录

源代码:gitee

01.构思

文章目录

目录

系列文件目录

文章目录

前沿

核心内容规划

 基础架构设计

字段映射逻辑

数据翻译机制

文档备份机制

异常处理方案

适用场景


前沿

        Excel数据导入数据库是常见需求,但传统固定模板难以满足灵活多变的业务场景。本专栏提供一套自由定义导入的解决方案,从零构建完整流程,涵盖规则设定、字段映射、数据校验、数据翻译、导入后处理等功能模块,实现高度可配置化操作。

核心内容规划

 基础架构设计

        通过配置文件用户自定义导入模板。

        打开config\ImpConfig.xlsx中sheet:Table

 详细说明:

字段

说明

序号

1

ModelName

SN_C_CFM

模块

Desc

C类料交期回复

说明

FilePath

docs\imp\SN

档路径

FileName

SN-Ass大料况*.xlsx

上传档,SN-Ass大料况*.xlsx表示SN-Ass大料况开头.xlsx档

SheetName

Sheet1(2)

读取sheet名,如果不设定或者找不到读取第一个sheet

TableName

EPI_PO_ASS_CONFIRM

写入数据库表名

Rows

有效数据从第几行开始,尚未开发

Cols

有效数据从第几列开始,尚未开发

ControlTable

CONTROL_TABLE

控制表定义,若不定义就不会写控制表

AfterImporting

运行前运行程序,尚未开发

BeforeImporting

运行后运行程序,尚未开发

BakPath

docs\imp\bak\SN

档运行后备份路径

字段映射逻辑

        通过可视化配置实现Excel列与数据库字段的灵活匹配。

         打开config\ImpConfig.xlsx中sheet:Field

详细说明

字段名类型必填描述
ModelNamestring关联 Table 表中的 ModelName
ExcelFieldstringExcel 中的列名
TableFieldstring对应数据库表的字段名
DefaultValue string默认值。支持以下特殊值:• `auto-generate` 自动生成批次 ID• `auto-datetime` 使用当前时间• `auto-line-number` 自动行号• `auto-generate-row` 每行生成唯一 ID
Descstring描述说明
Remarkstring备注说明
 

CONTROL_TABLE定义

CONTROL_TABLE:作用同步资料控制所用,可以自定义具体表名字与栏位名字

序号

ModelName

ExcelField

TableField

DefaultValue

Desc

remark

30

CONTROL_TABLE_WRITE

BATCH_ID

default-batch-id

默认批次号码

31

CONTROL_TABLE_WRITE

PROCESS_CODE

2000

项目代码

32

CONTROL_TABLE_WRITE

SERVER_CODE

SERCOMM

服务代码

33

CONTROL_TABLE_WRITE

DATA_COUNT

default-data-count

笔数

34

CONTROL_TABLE_WRITE

STATUS_CODE

100

状态代码

35

CONTROL_TABLE_WRITE

ERROR_MESSAGE

default-error-message

错误代码

36

CONTROL_TABLE_WRITE

B2B_CREATION_DATE_TIME

auto-datetime

创建日期

37

CONTROL_TABLE_WRITE

B2B_LAST_UPDATE_DATE_TIME

auto-datetime

修改日期

38

CONTROL_TABLE_READY

BATCH_ID

default-batch-id

默认批次号码

39

CONTROL_TABLE_READY

PROCESS_CODE

2000

项目代码

40

CONTROL_TABLE_READY

SERVER_CODE

SERCOMM

服务代码

41

CONTROL_TABLE_READY

DATA_COUNT

default-data-count

笔数

42

CONTROL_TABLE_READY

RETRY_COUNT

0

42

CONTROL_TABLE_READY

STATUS_CODE

120

状态代码

43

CONTROL_TABLE_READY

ERROR_MESSAGE

default-error-message

错误代码

44

CONTROL_TABLE_READY

B2B_CREATION_DATE_TIME

auto-datetime

创建日期

45

CONTROL_TABLE_READY

B2B_LAST_UPDATE_DATE_TIME

auto-datetime

修改日期

46

CONTROL_TABLE_FAILL

BATCH_ID

default-batch-id

默认批次号码

47

CONTROL_TABLE_FAILL

PROCESS_CODE

2000

项目代码

48

CONTROL_TABLE_FAILL

SERVER_CODE

SERCOMM

服务代码

49

CONTROL_TABLE_FAILL

DATA_COUNT

default-data-count

笔数

50

CONTROL_TABLE_FAILL

STATUS_CODE

120

状态代码

51

CONTROL_TABLE_FAILL

ERROR_MESSAGE

default-error-message

错误代码

52

CONTROL_TABLE_FAILL

B2B_CREATION_DATE_TIME

auto-datetime

创建日期

53

CONTROL_TABLE_FAILL

B2B_LAST_UPDATE_DATE_TIME

auto-datetime

修改日期

ModelName:只加Table中ControlTable对应WRITE【写入】,READY【准备】,FAILL【失败】

TableField:根据实际栏位进行,可自定义。

目前只写了CONTROL_TABLE_READY。

数据翻译机制

        内置中繁翻译保证写入资料库不出现乱码,具体在config\.env中配置。

文档备份机制

        自定义是否备份、备份路径,备份文件保留天数;

异常处理方案

        提供错误定位与批量修正功能,降低人工干预成本。

适用场景

        适合需要频繁调整导入规则或处理多源异构数据的开发人员及数据分析师。通过本方案可减少重复编码,提升数据接入效率。

http://www.lryc.cn/news/600034.html

相关文章:

  • 4麦 360度定位
  • 力扣 hot100 Day55
  • lock 和 synchronized 区别
  • 基于粒子群优化的PID控制在药液流量控制系统中的应用
  • nacos的配置中心
  • 学习嵌入式的第二十九天-数据结构-(2025.7.16)线程控制:互斥与同步
  • php语法--foreach和in_array的使用
  • 环境变量-进程概念(7)
  • PowerDesigner安装教程(附加安装包)PowerDesigner详细安装教程PowerDesigner 16.6 最新版安装教程
  • 7.文件操作:让程序读写文件 [特殊字符]
  • haproxy七层代理(原理)
  • 【07】C#入门到精通——C# 生成dll库 C#添加现有DLL C#调用自己生成的dll库
  • Typecho多语言解决方案:从插件到主题的完整实现
  • CANoe入门(11)-- 诊断模块
  • SpringBoot学习路径--SpringBoot的简单介绍和项目搭建
  • c++注意点(13)----设计模式(抽象工厂)
  • 医疗器械:DFEMA和PFEMA
  • 从数据脱敏到SHAP解释:用Streamlit+XGBoost构建可复现的川崎病诊断系统
  • [NLP]一个完整的 UPF 文件示例
  • 文心4.5横向对标全球大模型:技术突破与应用前景深度分析
  • OSPF 路由协议多区域
  • 利用Dify实现应用日志关键信息提取之实践
  • 九联UNT413AS_晶晨S905L3S芯片_2+8G_安卓9.0_线刷固件包
  • RK3588 HDMI-RX 驱动、RGA 加速与 OpenCV GStreamer 支持完整指南
  • React性能优化终极指南:memo、useCallback、useMemo全解析
  • 堆(Heap)优先级队列(Priority Queue)
  • python基础:request模块简介与安装、基本使用,如何发送get请求响应数据,response属性与请求头
  • 《计算机组成原理与汇编语言程序设计》实验报告一 基本数字逻辑及汉字显示
  • 机器学习详解(28):LightGBM原理
  • Linux系统编程——进程