问答 2024-08-19 来自:开发者社区

在Flink CDC的并行读取最终方案中,你们是如何通过标签和通知机制来保证数据顺序和状态清理的?

在Flink CDC的并行读取最终方案中,你们是如何通过标签和通知机制来保证数据顺序和状态清理的?

问答 2024-07-31 来自:开发者社区

在Flink CDC中,pgsql备库cdc,wal_level不改成逻辑的有啥方案嘛?

在Flink CDC中,pgsql备库cdc,wal_level不改成逻辑的有啥方案嘛?

高性能

基于 Flink CDC 打造企业级实时数据同步方案

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
问答 2024-07-10 来自:开发者社区

Flink CDC中oracle cdc备库的方案嘛?

Flink CDC中oracle cdc备库的方案嘛欢迎大家参与https://github.com/xiaofan2022/debezium/blob/mining_database_1.9/%E5%A4%87%E5%BA%93%E6%8C%96%E6%8E%98%E5%AE%9E%E7%8E%B0.md ?

问答 2024-07-10 来自:开发者社区

Flink CDC这种情况下有is_delete处理方案么?

Flink CDC这种情况下有is_delete处理方案么? is_delete 软删除字段。使用Flink-CDC同步Mysql[upsert模式]数据到Hudi,然后基于Hudi建设湖仓[MERGE_ON_READ],采用的flink-sql计算,分ods、dwd、dim、dws、ads计算,分2种情况1、Mysql中有部分数据,CDC同步之前就存在数据,这个使用使用cdc同步,+I 模式2....

问答 2024-06-26 来自:开发者社区

Flink CDC中 2.2.1 造成oracle session数过多,吃内存有优化的方案没呢?

Flink CDC中 2.2.1 造成oracle session数过多,吃内存有优化的方案没呢?

问答 2024-06-12 来自:开发者社区

在Flink CDC中请问有没有mysql增量备份的简单方案呢?

在Flink CDC中请问有没有mysql增量备份的简单方案呢?现在全量dump,文件太大了.

问答 2024-06-05 来自:开发者社区

在Flink CDC中Apache Flink未授权访问上传导致的RCE漏洞,有修复方案吗?

在Flink CDC中Apache Flink未授权访问上传导致的RCE漏洞,有修复方案吗?

问答 2024-05-15 来自:开发者社区

Flink CDC 轨迹上传 存储 大家一般用什么方案呀?

Flink CDC 轨迹上传 存储 大家一般用什么方案呀?

问答 2024-04-02 来自:开发者社区

Flink CDC里我用springboot + flink,这个方案 也应该是可以的吧?

Flink CDC里我用springboot + flink,因为有部分规则是需要调用 微服务的 feign接口来获取结果,多个Listener监听多个库,采用 canal - mq - 微服务消费 - 写结果 现在想把 canal - mq 这一层干掉,怎么处理?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注