问答 2023-05-01 来自:开发者社区

各位大佬,有没有遇到过 使用flink cdc sql同步数据,执行多个任务时,出现这个错误,同步数

各位大佬,有没有遇到过 使用flink cdc sql同步数据,执行多个任务时,出现这个错误,同步数据时配置了server-id也不行 但是我1.16拿不到数据,1.15.3拿的到

问答 2023-05-01 来自:开发者社区

遇到一个问题,Flink CDC 中cdc同步一张hive表到gp,直接卡主了,我中途删掉gp数据后

遇到一个问题,Flink CDC 中cdc同步一张hive表到gp,直接卡主了,我中途删掉gp数据后,任务又继续往gp写了数据,这是什么原因呢

高性能

Flink CDC 实现企业级实时数据同步

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
问答 2023-05-01 来自:开发者社区

Flink CDC如何配置全库同步,有链接不?

Flink CDC如何配置全库同步,有链接不?

问答 2023-05-01 来自:开发者社区

flink cdc 只能是一个表一个表去配置吗,如果我要把某个mysql 库的几百张表同步到pg 这

flink cdc 只能是一个表一个表去配置吗,如果我要把某个mysql 库的几百张表同步到pg 这个要怎么做呀

问答 2023-05-01 来自:开发者社区

请问下。有人使用过 flink cdc xstream同步oracle 数据的吗?目前我发现使用da

请问下。有人使用过 flink cdc xstream同步oracle 数据的吗?目前我发现使用database.connection.adpter 和out.server.name的方式。启动不了 xstream模式

问答 2023-05-01 来自:开发者社区

Flink CDC数据库建库的时候 带了中横线 ,导致同步的时候 报错了 有啥办法么?用的是dink

Flink CDC数据库建库的时候 带了中横线 ,导致同步的时候 报错了 有啥办法么?用的是dinky的cdcsource 怎么加都报错

问答 2023-05-01 来自:开发者社区

求个大佬看一哈 Flink CDC这个问题,使用savepoint 启动 ,然后加了新表,同步 快照

求个大佬看一哈 Flink CDC这个问题,使用savepoint 启动 ,然后加了新表,同步 快照的时候,同步到一部分后就仿佛停了一样,既不同步快照,又不同步binlog,也不报错,等了几个小时都这样,仿佛这段时间啥都没干https://github.com/ververica/flink-cdc-connectors/issues/2105,flink 1.14.2 flink CDC ...

问答 2023-05-01 来自:开发者社区

我在用flink cdc的从oracle同步历史数据到doris,请教一下存量数据是先全部拉到内存,

我在用flink cdc的从oracle同步历史数据到doris,请教一下存量数据是先全部拉到内存,拉完后再从内存存入doris吗?小数据量的时候没有问题,当我拉一个大表(2千万数据量,2个G大小)历史数据的时候,跑3-5分钟就报错了,怀疑是不是资源问题。有大佬指点一下吗。

问答 2023-05-01 来自:开发者社区

请教各位大佬,flink cdc同步mysql数据到iceberg,iceberg有50个表,然后要

请教各位大佬,flink cdc同步mysql数据到iceberg,iceberg有50个表,然后要对这50个表的小文件进行重写,怎么操作啊?我看官网有一段代码,我照搬过来后发现有问题

问答 2023-05-01 来自:开发者社区

各位大佬,麻烦问一下,Flink CDC使用SQL同步的时候,mysql同步到es中,需要同步多个索

各位大佬,麻烦问一下,Flink CDC使用SQL同步的时候,mysql同步到es中,需要同步多个索引,是不是一个索引对应一个insert语句,flink也就启动一个Job

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注