跳到主要内容
版本:v4.11

配置 ArgoDB 节点

配置要求​

在进行配置之前,请务必检查您的 ArgoDB 数据节点是否符合平台要求,参考如下:

要求详情
版本要求支持 ArgoDB 5.2 版本
权限要求JDBC 读取:
- 同步数据库的 SELECT 权限
ArgoDB 文件写入:
- 写入设置中设置的外表写入文件路径读取和写入权限。
- 同步数据库的 CREATE,SELECT 权限,同步表的 INSERT,UPDATE,DELETE,OWNERSHIP 权限。
其他要求通过 ArgoDB 写入 Hyperbase 表或 Hyperdrive 表前,需要单独安装 Hyperbase 产品。

操作步骤​

新建弹窗界面选择了 ArgoDB 节点类型之后,显示 ArgoDB 的基本信息配置模板:
连接配置:

  • 名称:必填,50字符限制,是该数据源在 DataPipeline 的唯一标识,不允许重复

  • 描述:非必填

  • 项目:必选,默认为「未分组」

  • 类型:必选

  • 版本:必选

  • JDBC连接配置

    • 服务器地址 & 端口:必填,支持填写多个
    • 数据库:必选,当您选择用户权限所有库时,在链路和任务中可以使用连接用户有权限的所有数据库;当您指定数据库后,在链路和任务中仅能使用指定的数据库
    • 认证类型:必选,支持信任认证、LDAP 认证、Kerberos 认证
    • JDBC 连接参数:非必填,输入 ArgoDB JDBC 连接支持的所有连接参数
  • ArgoDB 文件连接配置

    信息

    当 ArgoDB 需要作为数据目的地时,请输入「HDFS 连接配置」配置项。DataPipeline 将以文件写入方式将数据写入 ArgoDB。

    • HDFS 配置:作为数据目的地时必填,需上传 hdfs-site.conf、core-site.conf
    • 写入根目录:作为数据目的地时必填,需填写绝对路径
    • HDFS 用户名:作为数据目的地时必填
    • 认证类型:必选,支持信任认证和 Kerberos 认证
    • HDFS 连接参数:非必填,输入 HDFS 连接支持的所有连接参数

支持的数据类型​

数据读取​

全部数据类型

数据写入​

序号字段类型是否支持
1TINYINT是
2SMALLINT是
3INT是
4BIGINT是
5FLOAT是
6DOUBLE是
7DECIMAL(m,n), DECIMAL (默认为 DECIMAL(10,2))是
8BOOLEAN是
9STRING是
10CHAR(n)是,Hyperbase、Hyperdrive表不支持此类型
11VARCHAR(n)是
12VARCHAR2(n)是,Hyperbase、Hyperdrive表不支持此类型
13DATE是
14TIMESTAMP是
15TIME是,Hyperbase、Hyperdrive表不支持此类型
16BLOB是
17CLOB是

支持的存储模式​

数据读取​

支持读取ArgoDB目前支持的12种存储模式的内表以及外表。

  • TEXTFILE
  • ORC/ORC_TRANSACTION
  • CSVFILE
  • EXCEL/JSON
  • FWCFILE
  • SEQUENCEFILE
  • RCFILE
  • HOLODESK
  • PARQUET
  • HYPERDRIVE
  • HYPERBASE
  • ESDRIVE
  • SEARCH

数据写入​

支持向以下存储模式的内表写入数据。

  • Holodesk
  • ORC/ORC_TRANSACTION
  • HYPERDRIVE
  • HYPERBASE

注意事项​

警告
  • 同一个资源组下只能有一个 Kerberos 配置(KDC 相同) :::