跳到主要内容
版本:v5.13

差异数据补数

本文将为您介绍当进行数据任务校验时,如果校验出差异数据,如何进行补数的任务以及补数的要求和限制。

应用场景:​

当校验完成后,进入到校验结果tab,点击差异详情-查看详情。

根据校验结果,校验会分为三种差异情况:

差异情况差异描述及说明补数修复方案
多数据源端有查询条件的数据,目的地没有如果需要修复,会select该部分数据,在目的地执行delete
丢数据源端没有查询条件的数据数据,目的地有如果需要修复,会select该部分数据,在目的地执行merge(insert)
数据有差异源端和目的地有相同查询条件,但是部分字段不一致。如果需要修复,会select该部分数据,在目的地执行merge(update)

操作步骤​

  1. 点击「校验结果-查看详情」菜单,弹窗展示按照校验的差异情况分类展示。
  2. 勾选差异范围,点击开始补数,即可实现补数请求。
  3. 展示补数进度
  4. 点击“关闭窗口”页签,关闭查看页。
    1. 如果补数请求尚未完成,关闭后,该补数请求将在后台自动执行
    2. 如果请求未完成,再次发起请求时,会打开当前正在进行的请求的进度,并提示用户是否放弃之前的部署请求,重新开始补数。
提示

注意:

  1. 补数请求,仅针对数据内容校验的结果进行补数
  2. 补数请求的本质是基于校验的字段作为校验比对的key值,然后验证关注的其他字段是否一致。但是可能不同数据库之前存在一些差异,可能会导致一些校验结果的差异,这个也是无法通过补数任务进行修正的。
差异分类差异类型说明
查询条件(校验的key)未匹配到丢数据或者多数据。
由于某些原因可能存在源端有数据,目的地没有,或者目的地有,源端没有数据的情况
查询条件(校验的 key)可以匹配,但是字段值不一致数据精度丢失源库和目的地库可能会存在
字符编码异常
时间戳偏移
空值处理差异
数据截断
复杂数据差异
二进制数据差异
字段未正确更新