版本:v4.13
Pamion 数据节点数据映射
数据映射配置是将数据源数据与数据目的地数据关联起来的步骤,是 DataPipeline 产品支持多源异构场景的核心,通过图形化的配置,您可以轻松地建立不同数据节点之间的数据映射,来为数据任务的运行做准备。
关于此功能
Paimon 数据映射功能分为表映射和字段映射两个部分,通过数据结构定义与数据清洗脚本、配置逻辑主键,可对数据映射进行更加特异化的调整。
◎ 表映射
- 作为数据目的地:
- 创建内表
- 表数据模型:下拉选择
- 主键表(默认值)
- 追加表
- 写入配置:下文介绍
- 注释
- 操作
- 跳转至字段映射
- 多对一关系
- 高级清洗入口
- 删除目的地表映射
- 选择数据库
- 选择表数据模型
- 定义写入设置
- 表数据模型:下拉选择
- 选择已有表
- 创建内表
◎ 字段映射
- 调整字段映射内容
- 定义高级清洗
- 列表达式计算