版本:v4.7
映射监控
关于此功能
支持映射的同步数据处理、事务处理和增量延时统计监控,支持单条数据预估大小、单条数据平均大小、最新数据产生时间的统计。
| 模块 | 指标 | 指标释义 | 说明 |
|---|---|---|---|
| 同步数据处理 | 累计数据量 | 累计数据量指截至到某个时间点,当前映射的同步数据的总和。 | 支持查看不同统计粒度和时间范围内的数据,其中,支持查看的时间范围与您的es内索引留存时间有关。目前支持监控已读取数据量、已读取DML数据量、已处理数据量、已处理DML数据量、错误队列数据的累计量。 |
| 流量统计 | 流量统计指在一定的统计粒度下,当前映射同步的数据量。计算方法:结束时间的累计数据量与开始时间的累计数据量的差值。 | 您可以通过观察流量图的变化来查看流量变化趋势。支持通过调整颗粒度和时间范围来查看不同粒度下、不同时间范围内的数据变化。目前支持监控已读取数据量、已读取DML数据量、已处理数据量、已处理DML数据量的流量。 | |
| 同步速率 | 同步速率指单位时间内当前映射同步的数据量。 | ||
| 事务处理 | 事务数据 | 事务处理监控主要对当前任务同步的事务数量的统计。 | 任务的事务处理数量等于映射的事务处理数量。 |
| 增量延时统计 | 增量延时统计指当前映射数据目的地写入增量数据的延迟统计,将以图表形式展示单位时间内的延迟情况。 | 统计方式: 计算每个batch最后一条数据的延迟时间,根据统计时间做聚合展示。如统计时间为1分钟,1分钟内统计了3个batch,则延迟时间为3个batch中延迟最大的时间。如果2分钟统计了1个batch,无数据的区间补0展示,最终展示为折线。延迟计算方法:time1:数据产生时间(数据采集时间)。time2:数据写入目的地的时间日志读取方式,time1使用数据产生时间JDBC读取方式,time1使用数据采集时间 延迟时间=time2-time1 | |
| 表监控 | 单条数据预估大小 | 单条数据预估大小指获取系统表中获取单条数据的平均大小。 | 仅在源表的元数据被刷新时更新此值。此指标仅适用于mysql源和oracle源。 |
| 单条数据平均大小 | 单条数据平均大小指已读取数据的平均大小。 | 计算方法:单条数据平均大小=已读取数据大小/已读取数据条数。更新时机:每30秒更新一次。此指标仅适用于mysql源和oracle源。 |