数据目的地
常见问题 - 数据源&目的地
--: 返回常见问题 -
基本要求
| 问题: | | --- | | 数据源或目的地连接失败怎么办? | | 数据源或目的地可以重复使用吗? | | * 数据源多个表是否可以写到目的地一张表? |
数据源
Mysql源
| 问题: | | --- | | DataPipeline Mysql数据源的实时处理模式下,暂时无法读取哪些字段类型? | | DataPieline如何应对Mysql数据库表和字段名称大小写不敏感问题? |
Oracle源
| 问题: | | --- | | * Oracle实时模式为LogMiner时,为什么还需要设置读取频率? |
SQL Server源
| 问题: | | --- | | SQL Server数据源读取方式选择Change Tracking时需要注意什么? | | SQL Server实时模式为Change Tracking时,为什么还需要设置读取频率? |
FTP源
| 问题: | | --- | | FTP源的文件在不断写入的情况下,DataPipeline的读取与写入的模式是怎样的? | | FTP数据源静态表结构和动态表结构的区别是什么? | | FTP数据源静态表结构时,用户为什么需要确认首行是否为字段名称? | | FTP数据源支持哪些编码方式? |
数据目的地
SQL Server目的地
| 问题: | | --- | | * 行级的物理删除,使用Change Tracking的方式,是否获取的到?DataPipeline会如何处理这类的数据? | | * 数据源实时模式是否可以同步视图? |
Hive目的地
| 问题: | | --- | | * DataPipeline是否支持往已有Hive分区逻辑的目的地同步数据?还是只是支持往写新的分区写? | | * DataPipeline同步数据到Hive目的地表时,数据源发生变化会怎么样? | | * DataPipeline如何避免Hive目的地出现小文件问题? | | * 配置Hive目的地需要注意哪些? | | * Hive目的地时字段转换需要注意哪些问题? |
TIDB目的地
| 问题: | | --- | | * 目的地TIDB同步表时,需要注意什么? |
Kafka目的地
| 问题: | | --- | | kafka目的地支持设置新的分区吗? | | 多个表结构不一致的表,可以同步至kafka的同一个topic吗? |
Redshift目的地
| 问题: | | --- | | * Redshift 并发数设置是50,DataPipeline对100个表并发插入的方案?对Redshift 性能的影响?DataPipeline对大数据量并发插入Redshift 的处理方式? |
FTP目的地
| 问题: | | --- | | * 目的地FTP时,我们现在是按什么逻辑创建文件的? |
常见问题
| 问题: | | --- | | 各个数据目的地的写入方式分别是采用什么形式? | | DataPipeline支持的数据库的目标端的连接方式是什么? | | * DataPipeline支持的目标端冲突数据处理机制是什么? |