问答 2023-12-20 来自:开发者社区

使用3.0.0的Flink CDC同步8年历史数据发现丢失了两天的数据,请问有丢数据的case吗?

使用3.0.0的Flink CDC同步8年历史数据发现丢失了两天的数据,请问有丢数据的case吗?

问答 2023-12-19 来自:开发者社区

Flink CDC中binlog只保留七天,那历史数据是不是没办法直接通过CDC同步?

Flink CDC中binlog只保留七天,那历史数据是不是没办法直接通过CDC同步?

高性能

Flink CDC 实现企业级实时数据同步

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
问答 2023-12-19 来自:开发者社区

Flink CDC 在mysqlcdc同步到doris的时候,怎么进行设置?

Flink CDC 在mysqlcdc同步到doris的时候,怎么进行设置,可以在全量同步完之后,把任务停了。然后后续每天定时启动后还可以接着同步前一天的增量数据?

问答 2023-12-19 来自:开发者社区

Flink CDC Mysql cdc job 运行时间久了,就发现不同步数据了,有没有遇到过吗?

"Flink CDC Mysql cdc job 运行时间久了,就发现不同步数据了,只有重启才能继续同步数据。有没有同学遇到过这个问题:https://github.com/ververica/flink-cdc-connectors/issues/25682.4.2 说是这个问题解决了,但我切到 2.3 及以后的版本会出现下面的问题,是怎么回事呢?https://github.com/verv....

问答 2023-12-19 来自:开发者社区

Flink CDC这个整库同步到doris,好像和mysql有点区别?

Flink CDC这个整库同步到doris,好像和mysql有点区别?shou create db.table,要先use db按照doris官方文档这个来的

问答 2023-12-19 来自:开发者社区

Flink CDC可以同步表结构嘛?

Flink CDC可以同步表结构嘛?

问答 2023-12-19 来自:开发者社区

Flink CDC目前有整库同步吗?

Flink CDC目前有整库同步吗?

问答 2023-12-19 来自:开发者社区

Flink CDC使用datax或者其他全量工具同步到kafka; 是这个意思吧?

Flink CDC使用datax或者其他全量工具同步到kafka;第二步等kafka消费端完成了消费;第三步消费完后启动flink cdc增量方式,把同步全量开始的时间转换时间戳作为flink增量的时间戳开始同步更新;全量(datax)和增量(flink cdc)结合,是这个意思吧?

问答 2023-12-19 来自:开发者社区

Flink CDC中mysql也是那样,但是oracle 没有指定位点拉取,同步完后该怎么办呢?

Flink CDC中mysql也是那样,但是oracle 没有指定位点拉取,要是datax同步过程中 source有变化了的数据,同步完后该怎么办呢?

问答 2023-12-19 来自:开发者社区

Flink CDC中datax可能了解多一点,觉得对比一下,为什么flink不适合做全量同步了吗?

Flink CDC中datax可能了解多一点,觉得对比一下,你知道为什么flink不适合做全量同步了,有哪些因素考虑?现在用到datax

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注