跳到主要内容
版本:v4.4

映射监控

关于此功能​

支持映射的同步数据处理、事务处理和增量延时统计监控,支持单条数据预估大小、单条数据平均大小、最新数据产生时间的统计。

模块指标指标释义说明
同步数据处理累计数据量累计数据量指截至到某个时间点,当前映射的同步数据的总和。支持查看不同统计粒度和时间范围内的数据,其中,支持查看的时间范围与您的es内索引留存时间有关。目前支持监控已读取数据量、已读取DML数据量、已处理数据量、已处理DML数据量、错误队列数据的累计量。
流量统计流量统计指在一定的统计粒度下,当前映射同步的数据量。计算方法:结束时间的累计数据量与开始时间的累计数据量的差值。您可以通过观察流量图的变化来查看流量变化趋势。支持通过调整颗粒度和时间范围来查看不同粒度下、不同时间范围内的数据变化。目前支持监控已读取数据量、已读取DML数据量、已处理数据量、已处理DML数据量的流量。
同步速率同步速率指单位时间内当前映射同步的数据量。
事务处理事务数据事务处理监控主要对当前任务同步的事务数量的统计。任务的事务处理数量等于映射的事务处理数量。
增量延时统计增量延时统计指当前映射数据目的地写入增量数据的延迟统计,将以图表形式展示单位时间内的延迟情况。统计方式: 计算每个batch最后一条数据的延迟时间,根据统计时间做聚合展示。如统计时间为1分钟,1分钟内统计了3个batch,则延迟时间为3个batch中延迟最大的时间。如果2分钟统计了1个batch,无数据的区间补0展示,最终展示为折线。延迟计算方法:time1:数据产生时间(数据采集时间)。time2:数据写入目的地的时间日志读取方式,time1使用数据产生时间JDBC读取方式,time1使用数据采集时间 延迟时间=time2-time1
表监控单条数据预估大小单条数据预估大小指获取系统表中获取单条数据的平均大小。仅在源表的元数据被刷新时更新此值。此指标仅适用于mysql源和oracle源。
单条数据平均大小单条数据平均大小指已读取数据的平均大小。计算方法:单条数据平均大小=已读取数据大小/已读取数据条数。更新时机:每30秒更新一次。此指标仅适用于mysql源和oracle源。