数据迁移-数据验证程序
目前有很多架构升级项目,例如服务升级新模型。初始化后没有一套统一的方案和标准对迁移前后的数据进行查错和验证。尤其有些数据可能从用户界面上不容易发现异常,或者数据量较多的场景下通过用户界面取样验证并不可靠。因此开发该程序用于数据验证。
目标:
验证数据初始化后新老模型数据:完整性、一致性和数据的质量。
流程图:
备注:
- 历史数据和新模型数据的ID从数据初始化记录表获取,此记录表记录了本次初始化的基本情况,至少包含如下三个字段:1、原始数据ID、2、新模型ID、3、初始化状态(待初始化、成功、失败)
2024年2月2日大约 5 分钟