跳到主要内容
版本:v4.2

关系型数据节点数据映射

数据映射是将数据源的数据表和字段与数据目的地的表和字段建立映射关系的功能。数据映射配置是将源数据与目的地数据关联起来的步骤,是 DataPipeline 产品支持多元异构场景的核心。通过图形化的配置,您可以轻松地建立不同节点之间的数据映射,来为数据任务的运行做准备。

关于此功能​

数据映射功能分为表映射和字段映射两个部分,通过限制读取内容与数据清洗脚本,可对数据映射进行更加特异化的调整。

在表映射与字段映射中,对不同类型的数据源或数据目的地,支持映射其不同的特性包括索引、字符集、注释等特性。

我们将使用四个页面的篇幅介绍数据映射:

◎ 表映射​

数据映射配置--配置表映射

  • 选择同步列表;
  • 选择语义映射规则;
  • 创建新表;
  • 选择已有表;
  • 创建目的地表与刷新目的地表

◎ 字段映射​

数据映射配置--配置字段映射

  • 创建新表--调整字段映射内容
  • 选择已有表--选择字段映射
  • 刷新目的地表结构

◎ 限制读取内容​

数据映射配置--限制读取内容

  • 配置增量识别字段

◎ 配置清洗脚本​

数据映射配置--配置清洗脚本

  • 编辑与保存清洗脚本
  • 样例数据与试运行
  • 脚本库
  • 常见场景说明

注意事项​

警告
  • 数据映射是数据任务准确同步数据的基础,请谨慎配置。
  • 修改数据链路数据映射将影响到所有使用该映射的数据任务。 :::