版本:v4.21
策略配置
数据链路策略配置是在任务可以成功运行的基础上,对于任务运行过程中出现的问题进行应对的策略。
关于此功能
策略配置共包括 6 个细分策略,分别是
- 结构变化策略
- 数据加载策略
- 缓存策略
- 自动重启策略
- 错误队列策略
- 预警策略
- 日志策略
操作步骤
- 点击数据链路列表->数据链路详情,进入数据链路详情页;
- 点击策略配置按钮,切换至策略配置页面;
- 您可以点击以收起/展示每条策略的详细内容:
- 配置结构变化策略
- 点击以切换数据目的地节点
- 选择策略执行选项
- 策略选项中删除表与修改表结构的操作需要数据节点的相应权限,如执行过程中无相关权限,任务将报错暂停
- 配置数据加载策略
- 点击以切换数据目的地节点
- 选择策略执行选项
- 选项 3 中保留增量数据的处理需要配合数据映射的清洗脚本功能使用,详见<数据映射-清洗脚本-常见场景说明>
- 配置自动重启策略
- 详见<数据链路-策略配置-自动重启策略>
- 配置错误队列策略
- 详见<数据链路-策略配置-错误队列策略>
- 配置预警策略
- 点击新增任务运行预警创建预警规则
- 输入预警规则名称,选择预警指标,点击规则配置进行规则配置
- 为预警规则选择预警发送组
- 预警发送组配置,详见<系统设置-预警中心-预警发送组配置>
- 配置日志策略
- 确认日志存储回收时间是否合适
- 选择日志是否输出至服务器路径
- 配置输出格式
- 配置结构变化策略
警告
任务执行过程中,修改结构变化策略、数据加载策略、增量处理策略时,任务将被暂停;
选择该链路的数据任务将会遵循数据链路的策略配置,但在任务配置中,您可针对不直接影响任务运行的选项进行适应性调整。