数据传输DTS任务 在生产环境订阅的表很少,表修改的次数也有线,但是消息堆积非常多,怎么回事?
数据传输DTS任务 在生产环境订阅的表很少,表修改的次数也有线,但是消息堆积非常多,怎么回事?
我想了解下数据传输DTS中堆积数,跟binlog怎么映射的?
大概是昨天下午我通过dms的sql订正了41W数据左右 ,然后堆积数在凌晨两点左右达到峰值5百多万。晚上消费的很慢,连dms昨晚好像也执行不了任务。然后到四点左右消费大概每小时11W,早上九点我看到他已经把堆积数消费完了。我想了解下数据传输DTS中堆积数,跟binlog怎么映射的?然后感觉消费的数量和显示的堆积数不相等。任务id:dtsf07y1v78r316530
DataWorks中发现DTS做实时同步的时候也有wal堆积的问题,所以有可能是RDS的设置问题吗?
问题1:DataWorks中发现DTS做实时同步的时候也有wal堆积的问题,所以有可能是RDS的设置问题吗? 问题2:你这边用的 Postgres 是什么版本?
阿里云新版数据订阅 dts ,突然消息堆积,如何增加 消息拉取的速度,消息处理的速度。
最近两周我们的DTS数据订阅在周末经常出现消息堆积。 我们的消费程序,拿到消息后,立即异步执行我们的业务逻辑,消费速度可以认为是立即,而且我们只是监听了部分表的数据变化。 从现象上看是,消息突然增加,消费能力不足导致。但是我观察了日志,每次拉取的数据量也很小,如何增加这个数据的拉取量呢。
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。