版本:v2.7
配置阿里云 OSS数据源
配置阿里云 OSS 数据源
在进行配置之前,请务必检查您的OSS数据源是否符合平台要求,参考如下:
| 数据源类型 | 版本要求 | 用户权限要求 | 其他要求 |
|---|---|---|---|
| OSS数据源 | 无 | 无 | 无 |
确认完毕后,点击「新建数据源」,选择「OSS」进行新建操作:
参数介绍
- 数据源名称:是该数据源在DataPipeline的唯一标识。
- Bucket:需要用户填写用于存储对象的容器。
- 目录:是指输入读取对象的所在目录地址,请输入相对路径
- Endpoint:OSS Endpoint 信息,格式为:http://oss.aliyuncs.com/
- Access Key ID\&Access Key :访问密钥,相当于登录密码
- 文件类型:目前只支持CSV
- 表结构(单选)
- 静态:
1、指每个文件的表结构是一致的
2、支持同步到所有目的地类型- 设置首行为字段名称(单选)
- 是:读取文件时忽略第一行数据。
- 需要设置表头
- 多个表头用英文逗号隔开
- 不允许为空
- 否:会从文件第一行数据开始同步。

- 是:读取文件时忽略第一行数据。
- 设置首行为字段名称(单选)
- 动态:
1、指允许同步表结构不一致的文件到目的地
2、支持的数据目的地类型:Kafka、FTP、HDFS、Greenplum
:-:
- 静态:
- 编码方式:输入数据源数据的编码方式(支持所有合法的文件编码方式)。
- 文件分隔符(三选一)
- 逗号
- 水平制表
- 自定义
- 输入规则为:
- 分隔符可为任意字符,支持空格、转义字符等特殊字符;
- 可以直接输入的字符,在输入框中直接输入字符或者用Unicode来表示,例如: 分隔符为空格,则直接用键盘输入"空格",或者输入"\u0020"即可;
- 无法直接输入的字符,则应输入字符的对应Unicode或者用下表对应转义字符输入,例如:分隔符为换行,则输入"\n",或者输入"\u000a"。 | 字符 | 表示 | | --- | --- | | \b | \u0008,退格(BS) ,将当前位置移到前一列 | | \f | \u000c,换页(FF),将当前位置移到下页开头 | | \n | \u000a,换行(LF) ,将当前位置移到下一行开头 | | \r | \u000d,回车(CR) ,将当前位置移到本行开头 | | \t | \u0009,水平制表(HT) ,跳到下一个TAB位置 |
- 输入规则为:
* 特别地,若分隔符要求保留"\",则需输入两个“\”来表示,例如:分隔符为字符串"\b",则请输入"\\b"。
成功连接后将会自动打开该数据源的详情页。
