跳到主要内容
版本:v3.7

系统配置默认值

通过“系统配置默认值设置” 可以修改DataPipeline 数据融合产品中的配置选项的默认值。

关于此功能

当前版本的系统配置默认值包括“节点配置-语义映射配置”,”链路配置-基础配置“,“任务配置-读取/写入限制配置”

节点配置-语义映射配置

提示

语义映射共有三个层级

  • 系统层:系统默认的节点类型到节点类型的语义映射策略
  • 节点层:该节点作为数据源时,对一种数据目的地类型 - 版本的语义映射策略
  • 链路层:节点 A 到节点 B 的语义映射策略
  • 配置生效优先级:链路 > 节点 > 系统;当链路与节点层没有指定对应的语义映射,会使用系统层语义映射配置生成新的映射

默认映射中带精度标度的字段类型一般情况下会与数据源字段的精度标度相同,部分数据库会根据字符特性做特殊处理。

  • 多条相同的数据源类型的语义映射条件,系统将会按照从上至下的顺序进行映射。

链路配置-基础配置

V3.7版本链路配置-基础配置支持定义kafka目的地节点「写入设置」及新建Topic的参数。

配置内容与数据任务Kafka目的地配置参数相同,详见《配置 Kafka 数据节点表映射》章节。

当您在”系统配置默认值“中配置kafka目的地基础配置参数后,有以下两类参数会应用此配置:

  • 新建kafka目的地数据链路后,”映射设置“参数会应用系统配置默认值。(注:通过”映射设置“生成的映射,其参数将应用”映射设置“参数。)
  • 在数据链路手动点击”创建新Topic”、“选择已有Topic”生成的映射,“写入设置”的参数以及新建Topic的参数会应用系统配置默认值。
信息

应用场景:

当您需要为kafka目的地的参数配置统一的默认值时,可以在”系统配置默认值“/”链路配置-基础配置“配置该参数。如统一配置新建Topic分区数量、副本数量,配置Topic Value的消息体结构。

任务配置-读取/写入限制配置

配置内容与数据任务相同,详见《任务配置-限制配置》章节

操作步骤

  1. 在“系统设置”页面,点击“系统参数及默认值”,点击“系统配置默认值”TAB
  2. 修改节点配置-语义映射配置
    1. 切换数据源与数据目的地类型,配置一对数据源到目的地的语义映射
    2. 可点击查看该数据源类型至目的地类型的全部类型映射默认值
  3. 修改任务配置–读取/写入限制配置
  4. 保存配置
信息

保存的配置将对新创建的数据节点、数据链路、数据任务生效