问答 2024-03-26 来自:开发者社区

Flink CDC 里我现在需要同步一个数据库的数据转换到另一个库需要怎么做?

Flink CDC 里我现在需要同步一个数据库的数据转换到另一个库,大概有100+张表数据,有些数据需要清洗。又不能影响业务正常使用。我想着用CDC程序同步,但是可能要同时起很多source job,这样对原数据库的会有什么影响吗?

问答 2024-03-25 来自:开发者社区

Flink CDC里昨天我从polardb-mysql 做CDC同步任务,这是什么问题?

Flink CDC里昨天我从polardb-mysql 做CDC同步任务,用的是只读从库地址运行了3个小时 binlog 好像被清除了怎么回事?主库的任务一直都在运行,从库的跑了3个小时就找不到binlog,是需要哪里设置一下吗?

高性能

Flink CDC 实现企业级实时数据同步

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
问答 2024-03-25 来自:开发者社区

.Flink cdc任务在同步过程中 新增同步表后选择全量初始化历史数据,初始化什么时候开始?

Flink cdc任务在同步过程中新增同步表后选择全量初始化历史数据,会阻塞原先其余表的增量同步么?

问答 2024-03-25 来自:开发者社区

Flink CDC里有大哥有同步sql server的实践吗?

Flink CDC里有大哥有同步sql server的实践吗?我们有些采购的系统用的sql server需要采集他们的数据我发现我的check point好像没用,不生效。

问答 2024-03-25 来自:开发者社区

Flink CDC里同步近期数据和同步所有数据所花费的时间差不多,不知道有不有什么好的方式?

Flink CDC里同步近期数据和同步所有数据所花费的时间差不多,不知道有没有什么好的方式?

问答 2024-03-25 来自:开发者社区

在测试环境用flink cdc正则同步mysql分表,当作业启动后有新增分表,也能同步到吗?

在测试环境用flink cdc正则同步mysql分表,当作业启动后有新增分表,也能同步到,但是在生产上的mysql表就不能,还有对于新增字段,这边是用api整条数据同步的,测试环境也能同步到,生产上新增字段的数据竟然也不能同步到,这是和mysql的配置有关么?这样就不支持在扩大采集库的范围后从savepoint恢复。

问答 2024-03-25 来自:开发者社区

flink cdc到doris,如果mysql中的表被删除或者rename,同步任务会报错么?

flink cdc到doris,如果mysql中的表被删除或者rename,同步任务会报错么?

问答 2024-03-25 来自:开发者社区

Flink CDC里整库同步mysql的这个问题怎么解决?

Flink CDC里整库同步mysql的这个问题怎么解决?Caused by: com.ververica.cdc.connectors.shaded.com.zaxxer.hikari.pool.HikariPool$PoolInitializationException: Failed to initialize pool: No operations allowed after conne....

问答 2024-03-25 来自:开发者社区

请教一下,Flink CDC同步Oracle成功了吗?

有人用Flink CDC同步 Oracle 成功的吗?

问答 2024-03-25 来自:开发者社区

Flink CDC同步Oracle19c,是19C已经不支持用于 DBMS吗?

Flink CDC同步Oracle19c,是19C已经不支持用于 DBMS_LOGMNR.START_LOGMNR吗?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注