跳到主要内容
版本:v4.6

数据链路-策略配置

数据链路策略配置是在任务可以成功运行的基础上,对于任务运行过程中出现的问题进行应对的策略。

关于此功能​

策略配置共包括 6 个细分策略,分别是

  • 结构变化策略
  • 数据加载策略
  • 缓存策略
  • 自动重启策略
  • 错误队列策略
  • 预警策略
  • 日志策略

操作步骤​

  1. 点击数据链路列表->数据链路详情,进入数据链路详情页;

  2. 点击策略配置按钮,切换至策略配置页面;

  3. 您可以点击以收起/展示每条策略的详细内容:

    1. 配置结构变化策略

      1. 点击以切换数据目的地节点
      2. 选择策略执行选项
      3. 策略选项中删除表与修改表结构的操作需要数据节点的相应权限,如执行过程中无相关权限,任务将报错暂停
    2. 配置数据加载策略

      1. 点击以切换数据目的地节点
      2. 选择策略执行选项
      3. 选项 3 中保留增量数据的处理需要配合数据映射的清洗脚本功能使用,详见<数据映射-清洗脚本-常见场景说明>
    3. 配置自动重启策略

      1. 详见<数据链路-策略配置-自动重启策略>
    4. 配置错误队列策略

      1. 详见<数据链路-策略配置-错误队列策略>
    5. 配置预警策略

      1. 点击新增任务运行预警创建预警规则

      2. 输入预警规则名称,选择预警指标,点击规则配置进行规则配置

      3. 为预警规则选择预警发送组

        1. 预警发送组配置,详见<系统设置-预警中心-预警发送组配置>
    6. 配置日志策略

      1. 确认日志存储回收时间是否合适
      2. 选择日志是否输出至服务器路径
      3. 配置输出格式
警告

任务执行过程中,修改结构变化策略、数据加载策略、增量处理策略时,任务将被暂停;
选择该链路的数据任务将会遵循数据链路的策略配置,但在任务配置中,您可针对不直接影响任务运行的选项进行适应性调整。