问答 2022-07-04 来自:开发者社区

各位好,在使用flink cdc进行数据同步,已经实现。现在想做数据校验,目的就是每隔一定时间校验一

各位好,在使用flink cdc进行数据同步,已经实现。现在想做数据校验,目的就是每隔一定时间校验一下同步的数据是否正确,是否有落下的数据。大家有开源的校验工具么?可以做成定时任务的那种,需要支持:oracle、mysql、tidb

问答 2022-06-30 来自:开发者社区

flink cdc基于mysql binlog做数据同步,开启binlog权限后是所有表都有权限读取

flink cdc基于mysql binlog做数据同步,开启binlog权限后是所有表都有权限读取了么?如果是所有表都可以读,这样是不是会涉及数据安全问题

问答 2022-06-24 来自:开发者社区

flink cdc 做数据同步 使用kafka 的时候怎么保证顺序消费啊,只能使用一个分区吗

可以多分区吗?flinkcdc打包上传到flink没报错也不执行为什么?

问答 2022-01-19 来自:开发者社区

基于 Flink CDC 的实时数据同步方案在哪里可以获取到?

基于 Flink CDC 的实时数据同步方案在哪里可以获取到?

问答 2021-12-02 来自:开发者社区

flink sql cdc数据同步至mysql怎么做?

flink 1.12的jdbc connector不支持 sink.parallism 参数,是不是说只能和上游cdc connector保持相同的并行度1?如果是的话,下游sink会有瓶颈,因为表中存有大量的历史数据,将存量数据同步到目标表需要花费不少时间,而新的业务数据也源源不断进来,导致追不上。这要如何解决? flink 1.13的jdbc connector新增 sink.paralli....

文章 2020-11-03 来自:开发者社区

基于 Flink SQL CDC 的实时数据同步方案

整理:陈政羽(Flink 社区志愿者) Flink 1.11 引入了 Flink SQL CDC,CDC 能给我们数据和业务间能带来什么变化?本文由 Apache Flink PMC,阿里巴巴技术专家伍翀 (云邪)分享,内容将从传统的数据同步方案,基于 Flink CDC 同步的解决方案以及更多的应用场景和 CDC 未来开发规划等方面进行介绍和演示。 1、传统数据同步方案2、基于 Flink .....

基于 Flink SQL CDC 的实时数据同步方案

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。