版本:v4.1
配置 Hyperbase 数据节点字段映射
配置字段映射是在界面中建立数据源表中字段与数据目的地表中字段的映射关系,建立字段映射关系后,数据才能被准确的从数据源同步至数据目的地。
关于此功能
因在配置数据映射时可以在数据目的地选择已有表或新建表,配置字段映射也会根据表映射中所选内容而改变。
操作步骤
点击字段映射按钮,切换至字段映射 Tab;
通过高级清洗定义 rowkey 字段的生成逻辑;
在新建表的场景中
- 系统将根据默认语义映射规则自动的为您创建目的地字段与字段属性;
- 您可根据实际情况字段名称与字段属性。
在选择已有表的场景中
- 您可以为每一个数据源字段选择一个匹配的数据目的地字段;
- 您可以为每一个 Hyperbase 目的地字段分配列族。
说明
在创建新表时,您不需要手动创建 rowkey 字段。字段映射保存后,系统将自动为 Hyperbase 字段映射添加 rowkey 字段。rowkey 字段名称禁止修改,类型默认为 string。
您需要在高级清洗配置 rowkey 字段写入逻辑。简单示例如下,将 column_1 字段值写入 rowkey。
- public Map\<String, Object> process(Map\<String, Object> record) {
record.put(":rowkey", record.get("column_1"));
return record; - 请在 rowkey 字段名称前添加:,如以上示例。
- public Map\<String, Object> process(Map\<String, Object> record) {