阿里云文档 2025-04-29

VVP Flink CDC对接DLF Paimon Catalog

本文为您介绍如何通过阿里云实时计算Flink版(以下简称VVP)将Flink CDC数据实时摄入至DLF Paimon Catalog,实现高效的数据湖存储与管理。

阿里云文档 2025-04-07

如何通过Flink CDC实时订阅AnalyticDB PostgreSQL的全量和增量数据

AnalyticDB for PostgreSQL提供自研的CDC连接器,基于PostgreSQL的逻辑复制功能实现订阅全量和增量数据,可与Flink无缝集成。该连接器能够高效捕获源表的实时变更数据,支持实时数据同步、流式处理等,助力企业快速响应动态数据需求。本文介绍如何通过阿里云实时计算Flink版CDC实时订阅AnalyticDB for PostgreSQL的全量和增量数据。

阿里云文档 2025-03-28

Flink CDC写入MaxCompute

MaxCompute为您提供对接Flink CDC的新版插件Connector连接器。您可以通过对接Flink CDC,将数据源(例如MySQL)数据实时同步至MaxCompute的目标表(普通表或Delta表)。本文为您介绍MaxCompute新版插件的能力支持情况与主要操作流程。

问答 2025-01-10 来自:开发者社区

请问一下 Flink CDC 方式同步,目标数据量比源数据偏多问题

同步方式:PIPELINE source源:mysql sink源:starrocks 问题:初始化同步后,部分starrock表的数据比抽取的mysql源表还多 特点:mysql业务库使用了seata中间件做分布式事务,有物理删除行为

问答 2024-08-13 来自:开发者社区

在Flink CDC中,发到kafka下游再处理数据还是用算子处理完直接写到目标库里面?

在Flink CDC中,发到kafka下游再处理数据还是用算子处理完直接写到目标库里面?

问答 2024-07-15 来自:开发者社区

在Flink CDC中同步Mysql数据,数据能全部同步到目标,只是过一段时间后 任务会报错为什么?

在Flink CDC中同步Mysql数据,数据能全部同步到目标,只是过一段时间后 任务会报错,请问是什么原因?请参考图片:

问答 2024-07-15 来自:开发者社区

在Flink CDC中现在可以同步mysql的表结构变化,但是如何将表结构变化同步到目标呢?

在Flink CDC中现在可以同步mysql的表结构变化,但是如何将表结构变化同步到目标postgrep端呢?

问答 2024-06-05 来自:开发者社区

在Flink CDC中对数据的修改变更会以新的记录形式写到目标表,为什么不是在目标表中修改数据呢?

在Flink CDC中flink 1.7.2模式 yarn-session flink SQL使用flink-sql-connector-cdc-oracle-3.1.0flink-connector-jdbc-3.1.2-1.17SQL 配置如下,可以实现数据全量同步,新增数据同步,删除数据同步,但是对数据的修改变更会以新的记录形式写到目标表,为什么不是在目标表中修改数据呢?请参考图片:

问答 2024-04-22 来自:开发者社区

Flink CDC里假如源库删除了某行数据,那么在CDC同步后会删除目标库中对应的数据吗?

Flink CDC里假如源库删除了某行数据,那么在CDC同步后会删除目标库中对应的数据吗?有没有办法在目标库中增加逻辑删除字段?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注