跳到主要内容
版本:v2.7

数据目的地

常见问题 - 数据源&目的地​

--: 返回常见问题 -

基本要求​

| 问题: | | --- | | 数据源或目的地连接失败怎么办? | | 数据源或目的地可以重复使用吗? | | * 数据源多个表是否可以写到目的地一张表? |

数据源​


Mysql源​

| 问题: | | --- | | DataPipeline Mysql数据源的实时处理模式下,暂时无法读取哪些字段类型? | | DataPieline如何应对Mysql数据库表和字段名称大小写不敏感问题? |

Oracle源​

| 问题: | | --- | | * Oracle实时模式为LogMiner时,为什么还需要设置读取频率? |


SQL Server源​

| 问题: | | --- | | SQL Server数据源读取方式选择Change Tracking时需要注意什么? | | SQL Server实时模式为Change Tracking时,为什么还需要设置读取频率? |

FTP源​

| 问题: | | --- | | FTP源的文件在不断写入的情况下,DataPipeline的读取与写入的模式是怎样的? | | FTP数据源静态表结构和动态表结构的区别是什么? | | FTP数据源静态表结构时,用户为什么需要确认首行是否为字段名称? | | FTP数据源支持哪些编码方式? |


数据目的地​

SQL Server目的地​

| 问题: | | --- | | * 行级的物理删除,使用Change Tracking的方式,是否获取的到?DataPipeline会如何处理这类的数据? | | * 数据源实时模式是否可以同步视图? |

Hive目的地​

| 问题: | | --- | | * DataPipeline是否支持往已有Hive分区逻辑的目的地同步数据?还是只是支持往写新的分区写? | | * DataPipeline同步数据到Hive目的地表时,数据源发生变化会怎么样? | | * DataPipeline如何避免Hive目的地出现小文件问题? | | * 配置Hive目的地需要注意哪些? | | * Hive目的地时字段转换需要注意哪些问题? |

TIDB目的地​

| 问题: | | --- | | * 目的地TIDB同步表时,需要注意什么? |

Kafka目的地​

| 问题: | | --- | | kafka目的地支持设置新的分区吗? | | 多个表结构不一致的表,可以同步至kafka的同一个topic吗? |

Redshift目的地​

| 问题: | | --- | | * Redshift 并发数设置是50,DataPipeline对100个表并发插入的方案?对Redshift 性能的影响?DataPipeline对大数据量并发插入Redshift 的处理方式? |

FTP目的地​

| 问题: | | --- | | * 目的地FTP时,我们现在是按什么逻辑创建文件的? |

常见问题​

| 问题: | | --- | | 各个数据目的地的写入方式分别是采用什么形式? | | DataPipeline支持的数据库的目标端的连接方式是什么? | | * DataPipeline支持的目标端冲突数据处理机制是什么? |