阿里云文档 2024-06-28

社区CDC

本文为您介绍如何在阿里云实时计算Flink版中使用社区版CDC(Change Data Capture)连接器,以及更改连接器名称。

问答 2023-11-15 来自:开发者社区

Flink CDC生产环境配置?

Flink CDC生产环境配置?

问答 2023-11-15 来自:开发者社区

Flink CDC读取oracle增量数据 关闭增量快照配置,可以正确读取增量数据,哪位帮忙看下?

Flink CDC读取oracle增量数据关闭增量快照配置,可以正确读取增量数据,开启后,会报“io.debezium.DebeziumException: The db history topic or its content is fully or partially missing. Please check database history topic configuration and....

问答 2023-11-15 来自:开发者社区

Flink CDC对于oracle表,只抽取增量数据,这样的配置可以吗?

Flink CDC对于oracle表,只抽取增量数据,这样的配置可以吗?

文章 2023-11-14 来自:开发者社区

Flink CDC确实支持Oracle分区表的CDC,但是在配置时需要特别注意。以下是一些可能的解决方案

Flink CDC确实支持Oracle分区表的CDC,但是在配置时需要特别注意。以下是一些可能的解决方案: 检查Flink CDC的配置:确保你的Flink CDC任务正确配置了Oracle分区表的CDC。这包括正确的JDBC URL、用户名、密码以及表名。 检查Oracle分区表的配置:确保你的Oracle分区表已经正确配置,...

问答 2023-11-07 来自:开发者社区

Flink CDC你们cdc配置db.*,如果库里频繁加表,你们是咋操作的,一加表就重启任务?

Flink CDC你们cdc配置db.*,如果库里频繁加表,你们是咋操作的,一加表就重启任务?不生效啊,任务一直运行着,库里新建一个表,如果不重启任务,增量数据都进不去,只能savepoint,然后savepoint恢复任务,不及时恢复任务,那么后面这个表的历史数据会丢失,除非在任务初始化的时候指定表名,全量启动,后面新建的表,再加到配置里,然后恢复启动不会有问题

问答 2023-11-07 来自:开发者社区

Flink CDC这里的brokers虽然可以配置多个,但是只要第1个brokers挂了,这怎么破?

Flink CDC这里的brokers虽然可以配置多个,但是只要第1个brokers挂了,任务就挂了,这怎么破?

问答 2023-11-06 来自:开发者社区

Flink CDC集群开启checkpoint的配置 是这个嘛?

Flink CDC集群开启checkpoint的配置 checkpointing.enabled: true 是这个嘛?

问答 2023-11-06 来自:开发者社区

Flink CDC如果使用增量快照的话,是不是需要配置一下或者依赖哪个包呢?

Flink CDC如果使用增量快照的话,是不是需要配置一下或者依赖哪个包呢?checkpointConfig.setSnapshotType(SnapshotType.INCREMENTAL) 这种配置方式无法实现

问答 2023-11-06 来自:开发者社区

我用的Flink1.7,CDC版本2.3的,有没有的类似代码给一个,看看是不是哪里配置少了?

我用的Flink1.7,CDC版本2.3的,这种initial模式理论上是第一次同步全量数据,后面如果再启动,只要flink保存了checkpoint,里面应该有程序停止前的scn位置吧,下次启动不会再全量读了,从上次的scn开始读,有没有的类似代码给一个,看看是不是哪里配置少了?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注