问答 2023-06-04 来自:开发者社区

Flink CDC 数据还没同步完,日志显示全量数据读取完了?这种情况是不是没法做断点续传了!

Flink CDC 数据还没同步完,日志显示全量数据读取完了?这种情况是不是没法做断点续传了

问答 2023-06-04 来自:开发者社区

大佬们,Flink CDC中有谁用过全量同步的检查点机制?我这边配置检查点后,重新启动,都没有读取后

大佬们,Flink CDC中有谁用过全量同步的检查点机制?我这边配置检查点后,重新启动,都没有读取后续的全量数据了?

高性能

Flink CDC 实现企业级实时数据同步

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
问答 2023-06-04 来自:开发者社区

Flink CDC中每个mysql的实例含有的表名都是一样的,同步到doris的时候,只保留一份表?

Flink CDC中每个mysql的实例含有的表名都是一样的,同步到doris的时候,只保留一份表名,相当于不同实例的数据库表的数据要插入到doris对应的表中,那么可以通过flink的sql-clint去执行相关sql,达到我想要的效果吗?

问答 2023-05-29 来自:开发者社区

有人用Flink CDC同步mysql的information_schema的表吗? 这视图后面有实

有人用Flink CDC同步mysql的information_schema的表吗? 这视图后面有实体吗?

问答 2023-05-29 来自:开发者社区

Flink CDC中千万数据的mysql 订单表和 10万数据的商品表 用 flinksql同步到?

问题1:Flink CDC中千万数据的mysql 订单表和 10万数据的商品表 用 flinksql同步到 一个大宽表的时候taskheap内存占用越来越多 同步到 几十万数据的时候内存就占满了。又遇到过的吗? 问题2: INSERT INTO p_enriched_order SELECT o.,p. FROM p_code_order AS o LEFT JOIN p_product AS ....

问答 2023-05-29 来自:开发者社区

大佬们,想问一下flink cdc支持同步postgres的按日分区的分区表吗?数据量有点大,分区后

大佬们,想问一下flink cdc支持同步postgres的按日分区的分区表吗?数据量有点大,分区后比较容易清理历史数据

问答 2023-05-29 来自:开发者社区

请教一下,Flink CDC中debezium MySQL可以不同步初始化数据吗?实现类似Postg

请教一下,Flink CDC中debezium MySQL可以不同步初始化数据吗?实现类似PostgreSQL snapshot.mode=never的效果?

问答 2023-05-29 来自:开发者社区

各位老哥 Flink CDC中你们同步入湖的时候 遇到delete 的数据怎么搞的呢?我这边是导入

各位老哥 Flink CDC中你们同步入湖的时候 遇到delete 的数据怎么搞的呢?我这边是导入kafka 在sink下游,所以需要delete数据是不是只能先insert ,后 delete啊

问答 2023-05-29 来自:开发者社区

现在开源的flink和flink cdc支持flinksql的方式同步整个库的数据了么 ?

现在开源的flink和flink cdc支持flinksql的方式同步整个库的数据了么 ? 这个可以去提request ,我对整库同步比较感兴趣

问答 2023-05-29 来自:开发者社区

大佬们,Flink CDC中这种方式同步可以看见flink执行的sql吗?

大佬们,Flink CDC中这种方式同步可以看见flink执行的sql吗?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注