问答 2024-05-29 来自:开发者社区

Flink读取CDC全量数据同步没有异常但是无法同步增量数据

Flink读取CDC全量数据同步没有异常但是无法同步增量数据

文章 2024-03-18 来自:开发者社区

有大佬知道在使用flink cdc实现数据同步,如何实现如果服务停止了对数据源表的某个数据进行删除操作,重启服务之后目标表能进行对源表删除的数据进行删除吗?

有大佬知道在使用flink cdc实现数据同步,如何实现如果服务停止了对数据源表的某个数据进行删除操作,重启服务之后目标表能进行对源表删除的数据进行删除吗? Flink CDC(Change Data Capture)可以捕获源数据库的变更事件,包括插入、更新和删除操作。当Flink CDC连接到源数据库时&#x...

文章 2024-02-24 来自:开发者社区

Flink CDC数据同步问题之同步数据减少如何解决

问题一:Flink CDC现在支持从oracle备库同步数据吗? Flink CDC现在支持从oracle备库同步数据吗? 参考答案: 备库不支持的要主库 关于本问题的更多回答可点击进行查看: https://developer.aliyun.com/ask/538438?spm=a2c6h.13066369.que...

Flink CDC数据同步问题之同步数据减少如何解决
文章 2024-02-24 来自:开发者社区

Flink CDC数据同步问题之同步数据到checkpoint失败如何解决

问题一:Flink CDC sqlserver数据同步一个小时才同步1w条,Parallelism 参数不能设置吗? Flink CDC sqlserver数据同步一个小时才同步1w条,Parallelism 参数不能设置吗? 参考答案: 在 Flink CDC 中,可以通过调整 Parallelism 参数来增加任务的并行度,从而提高数据同步的速度。...

Flink CDC数据同步问题之同步数据到checkpoint失败如何解决
文章 2024-02-24 来自:开发者社区

Flink CDC数据同步问题之向kafka同步数据报错如何解决

问题一:使用flink cdc 同步数据到sr 有使用界面化的任务配置管理工具吗? 使用flink cdc 同步数据到sr 有使用界面化的任务配置管理工具吗? 参考答案: 我们走的是阿里的整库同步,自动映射元数据和ddl语句从mysql到starrocks,自动同步元数据,没有配置界面,直接sql指定。!E243(https:E243//ucc.ali...

Flink CDC数据同步问题之向kafka同步数据报错如何解决
问答 2023-12-18 来自:开发者社区

有知道在使用flink cdc实现数据同步,如何实现如果服务停止了对数据源表的某个数据进行删除操作?

有大佬知道在使用flink cdc实现数据同步,如何实现如果服务停止了对数据源表的某个数据进行删除操作,重启服务之后目标表能进行对源表删除的数据进行删除吗?

问答 2023-11-22 来自:开发者社区

Flink CDC我有60w数据同步,slot是8个,大概同步到一般数据的时候会开始提示?

Flink CDC我有60w数据同步,slot是8个,并行度是4个,大概同步到一般数据的时候会开始提示,Could not acquire the minimum required resources。 但是最终60w数据都能跑完,但是后续的增量就无法同步了。我的环境是 springboot 应用,然后启动一个线程 StreamExecutionEnvironment.execute() 的?同....

问答 2023-11-21 来自:开发者社区

Flink CDC数据同步作业开启之后,有没有好的数据对比方案,比较源端和目标端的数据是否一致?

Flink CDC数据同步作业开启之后,有没有好的数据对比方案,比较源端和目标端的数据是否一致(数量一致、内容一致等等)?

问答 2023-07-26 来自:开发者社区

Flink CDC中oracle cdc支持带我分区表的数据同步吗?主要是同步带有分区表的数据会报错

Flink CDC中oracle cdc支持带我分区表的数据同步吗?主要是同步带有分区表的数据会报topic有问题。

问答 2023-06-11 来自:开发者社区

请问在使用Flink CDC中mongo cdc的时候,全量数据同步完成后,不会同步增量数据,这种?

请问在使用Flink CDC中mongo cdc的时候,全量数据同步完成后,不会同步增量数据,这种问题有人遇到过吗,我建了一个issue: https://github.com/ververica/flink-cdc-connectors/issues/2183?增量数量的量不小,我直接用mongo change stream是可以拉到数据的

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。