跳到主要内容
版本:v2.7

任务流

任务流

1.什么是「任务流」?​

企业用户需要把多个任务串联在一起,实现各个任务之间的依赖关系,当上游任务完成同步时可自动开启下游任务,实现数据同步的批流一体化。目前支持的组件任务有数据任务、远程命令执行、延时器等。

2.创建「任务流」能做什么?​

创建「任务流」能带给用户的核心功能有:

  1. 支持同时连接多个任务来实现任务之间的调度。
  2. 支持调度的组件任务包括数据任务、组件任务、延时器。
  3. 支持设置统一的开始时间,定时去调度整个任务流。
  4. 支持设置用户权限。
  5. 支持可视化的界面方便用户查看每个组建任务的执行情况。
  6. 支持查看任务的执行日志,快速高效地定位问题。

3.如何创建「任务流」?​

使用DataPipeline创建一项任务流,主要分五个步骤:
1.创建任务流

2.配置任务流各个组件任务

3.设置任务流权限

4.激活任务流

1.在首页,点击「新建任务流」。

2.设置「任务流」名称、描述。

3.进入任务流配置界面,进行任务流配置。
image.png

  • 配置面板
    • 设置开始任务组件
    • 设置数据任务组件
    • 设置远程命令执行组件
    • 设置延时器
    • 设置任务之间的依赖关系
  • 权限设置

4.激活任务流。
点击任务流开关,可立即开启整个任务流。

信息

注:要求所有的组件任务必须是完善状态,否则任务流无法激活。