跳到主要内容
版本:v2.7

子任务设置

batch设置​

  • batch条数、大小和时间代表一次性批量写入表的数据,三者满足一个条件即可生效。当达到用户设置的条数、大小或者时间时,系统会进行一批次地写入。对于设置数值的大小也应根据实际内存容量进行调整,因为当设置的值特别大时,会对内存空间造成一定的影响,如果没有开启动态限速,则读取数据会越来越多对于内存空间也占据越来越大,如果目的地无法及时消费的话,有可能造成数据丢失。
  • 支持用户设置batch大小来进行批量任务的写入,开启后对当前表生效,优先级高于全局设置的参数信息。
  • 关闭时,表示按照子任务设置batch进行批量写入
  • 点击开启时image.png
    • 设置开启后对当前界面的表或文件生效,读取数据达到设置条件后,进行批量同步写入。优先级高于全局子任务设置,启用时优先采用。
    • 条数和时间为必填项,不允许为空
    • 大小为选填项,允许为空
      • 条数类型显示“读取满____条时批量写入”,输入框数值默认为5000,允许用户修改,输入可以为空。
      • 大小类型显示,“读取满____KB/MB时批量写入”,KB和MB单位可在下拉栏切换,用户可选填,允许修改,可以为空。
      • 时间类型显示“读取满____秒/分时批量写入”,默认为30秒,秒和分可在下拉栏切换,允许修改,输入可以为空。