版本:v4.7
配置 Gbase 8c 数据节点
配置要求
在进行配置之前,请务必检查您的 GaussDB(for opengauss) 数据节点是否符合平台要求,参考如下:
| 要求 | 详情 |
|---|---|
| 版本要求 | 支持:V5 3.0.0 版本 |
| 权限要求 | 1. 逻辑复制读取模式:操作用户需要拥有 REPLICATION 权限,对 pg_user 表有 SELECT 权限,对源端业务数据库有 SELECT 权限。 2. JDBC 读取模式:pg_user 表的 SELECT 权限 |
| 其他要求 | 1. 逻辑复制读取模式: - 设置 GUC 参数 wal_level = logical。 - 设置 GUC 参数 enable_slot_log = on。 - 设置 GUC 参数 max_replication_slots >= 每个节点所需的(物理流复制槽数 + 备份槽数 + 逻辑复制槽数)。 - 建议对无主键表追加主键,或将无主键表的 REPLICA IDENTITY 属性设置为 FULL,否则将无法捕获到删除事件。 2. JDBC 读取模式: - 要求需要同步的表拥有增量识别字段,用于同步增量数据。选择的字段必须为可排序,例如数字或时间类型,推荐的字段类型一般为随数据更新而自增的字段,如:更新序列号(例: SequenceID),更新时间戳(例: UpdatedAt) |
操作步骤
新建弹窗界面选择了 Gbase 8c 节点类型之后,显示 Gbase 8c 的基本信息配置模板:
- 版本:V5 3.0.0
- 部署模式:选择“分布式部署”或“集中部署”
- 服务器地址:
- 当部署模式为“分布式部署”时,输入Coordinator Node地址(例:123.207.123.213)。
- 当部署模式为“集中部署”时,输入服务器地址(例:123.207.123.213)。
- 端口:输入连接数据节点的端口值。
- 数据库:请输入数据库名称。
- 认证类型:选择认证类型。
注意事项
- 当读取方式为逻辑复制方式时:
- 不支持 interval partition 表、不支持全局临时表的复制。
- 在分布键键值变更的场景下(极短时间内先进行删除再进行写入),如果新写入数据分布的 DN 节点与被删除数据分布的 DN 节点不一致,可能出现解析乱序情况,导致数据目的地出现以下现象:
- 数据加载策略为 merge:同步至目的地时丢失写入数据。
- 数据加载策略为 insert:
- 数据目的地存在主键或配置逻辑主键,数据写入目的地时由于主键冲突进入错误队列。
- 数据目的地无主键且未配置逻辑主键,不是消息队列类型节点时,数据写入目的地后出现重复数据。
- 数据目的地为消息队列类型节点,如 Kafka,同步至数据目的地时先记录写入操作再记录删除操作。