不同库名或表名的数据校验

用户在使用 DM 等同步工具时,可以设置 route-rules 将数据同步到下游指定表中。sync-diff-inspector 提供了校验不同库名、表名的表的功能。

下面是一个简单的例子:

  1. ######################### Tables config #########################
  2. # 配置需要对比的*目标数据库*中的表
  3. [[check-tables]]
  4. # 目标库中数据库的名称
  5. schema = "test_2"
  6. # 需要检查的表
  7. tables = ["t_2"]
  8. # 下面是一个对比不同库名和表名的两个表的配置示例
  9. [[table-config]]
  10. # 目标库名
  11. schema = "test_2"
  12. # 目标表名
  13. table = "t_2"
  14. # 源数据的配置
  15. [[table-config.source-tables]]
  16. # 源库的实例 id
  17. instance-id = "source-1"
  18. # 源数据库的名称
  19. schema = "test_1"
  20. # 源表的名称
  21. table = "t_1"

使用该配置会对下游的 test_2.t_2 与实例 source-1 中的 test_1.t_1 进行校验。

如果需要校验大量的不同库名或者表名的表,可以通过 table-rule 设置映射关系来简化配置。可以只配置 schema 或者 table 的映射关系,也可以都配置。例如上游库 test_1 中的所有表都同步到了下游的 test_2 库中,可以使用如下配置进行校验:

  1. ######################### Tables config #########################
  2. # 配置需要对比的*目标数据库*中的表
  3. [[check-tables]]
  4. # 目标库中数据库的名称
  5. schema = "test_2"
  6. # 检查所有表
  7. tables = ["~^"]
  8. [[table-rules]]
  9. # schema-pattern 和 table-pattern 支持通配符 *?
  10. schema-pattern = "test_1"
  11. #table-pattern = ""
  12. target-schema = "test_2"
  13. #target-table = ""