跳到主要内容
版本:v4.11

配置 MogDB 节点

配置要求​

在进行配置之前,请务必检查您的 MogDB 数据节点是否符合平台要求,参考如下:

要求详情
版本要求数据节点支持MogDB版本5.0.x
1. 逻辑复制读取模式
2. JDBC 读取模式
3. JDBC写入模式
权限要求
- 逻辑复制读取模式:
- 设置GUC参数wal_level=logical。
- 设置GUC参数enable_slot_log=on。
- 设置GUC参数max_replication_slots>=每个节点所需的(物理流复制槽数+备份槽数+逻辑复制槽数)。
- 以下场景请将表的 REPLICA IDENTITY 属性配置为 FULL。关于 REPLICA IDENTITY 属性说明请参考:https://www.postgresql.org/docs/16/sql-altertable.html#SQL-ALTERTABLE-REPLICA-IDENTITY 。
- 无主键表。否则无法捕获到删除事件。建议对无主键表追加主键。
- 需要将删除事件在数据目的地转换为插入事件或更新事件。通常见于历史数据保留、审计等场景。
- 需要在数据目的地写入更新事件的更新前数据以及更新后数据。通常见于下游为KAFKA数据目的地的数据计算场景。
- JDBC读取模式:
- 用户权限要求:
- pg_user表的 SELECT 权限
- 要求需要同步的表拥有增量识别字段,用于同步增量数据。选择的字段必须为可排序,例如数字或时间类型,推荐的字段类型一般为随数据更新而自增的字段,如:更新序列号(例: SequenceID),更新时间戳(例: UpdatedAt)
- JDBC写入模式:
- SELECT, CREATE TABLE, INSERT, UPSERT, DELETE, DROP, TRUNCATE
其他要求无

操作步骤​

新建弹窗界面选择了MogDB节点类型之后,显示 MogDB 的基本信息配置模板:
连接配置:

  • 名称:必须填写,50字符限制,是该数据源在 DataPipeline 的唯一标识,不允许重复
  • 描述:选填
  • 项目:必选,默认为「未分组」
  • 类型:必选
  • 版本:必选
  • 时区:必选,默认是 +8:00,即东八区
  • 服务器地址:填写MogDB 服务器的地址
  • 端口号:填写端口号
  • 数据库:必填需要指定数据库,因为每种数据库都有一个确定的兼容模型,因此需要指定到数据库级别
  • 认证方式:必选,支持口令认证和SSL认证
  • 连接参数:输入 MogDB JDBC 连接支持的所有连接参数

支持的数据类型​

序号字段类型是否支持
1BIGINT(INT8)支持
2INTEGER(INT4)支持
3SMALLINT(INT2)支持
4TINYINT(INT1)支持
5BOOLEAN支持
6DECIMAL支持
7NUMBERIC支持
8DOUBLE支持
9FLOAT4支持
10FLOAT8支持
11CHAR支持
12VARCHAR支持
13NVARCHAR2支持
14TEXT支持
15CLOB支持
16BYTEA支持
17MONEY支持
18RAW支持
19DATE支持
20TIMESTAMP支持
21TIMESTAMPTZ支持
22TIME支持
23TIMETZ支持
24SMALLDATETIME支持
25BIT支持
26VARBIT支持
27JSON支持
28JSONB支持
29XID支持
30XID32支持
31NAME支持
32BINARY支持
33LONGTEXT支持
34LONGBLONB支持
35BFILE支持
36DATETIME支持

注意事项​

警告
  • SelectDB 支持做数据目的地,暂不支持做数据源。 :::