问答 2024-03-20 来自:开发者社区

Flink目前cdc 整库同步支持哪些呀?

Flink目前cdc 整库同步支持哪些呀?

问答 2024-03-20 来自:开发者社区

Flink CDC 里sqlserver 同步只能到ES吗?

Flink CDC 里sqlserver 同步只能到ES吗,整合好的.还是只要实现了的,都可以呢?比如到mysql 到doris starRocks.

高性能

Flink CDC 实现企业级实时数据同步

传统的数据集成通常由全量和增量同步两套系统构成,在全量同步完成后,还需要进一步将增量表和全量表进行合并操作,这种架构的组件构成较为复杂,系统维护困难。本方案提供 Flink CDC 技术实现了统一的增量和全量数据的实时集成。
技术解决方案背景图
问答 2024-03-19 来自:开发者社区

flink sql cdc里面加了一个条件,初次同步的时候,他是会先把所有符合条件的数据读出来吗?

flink sql cdc里面加了一个条件,初次同步的时候,他是会先把所有符合条件的数据读出来吗,我看好长时间一动不动,是这样我们表里面有一年的数据,现在我只想同步近三个月的数据,所以加了个时间条件,但是现在这个同步没有开始呢,一直卡着。我现在是在最后的insert里面加的select where create_time > 三个月前的时间 这样写会有啥问题吗?还是在创建表的时候,指定开始的...

问答 2024-03-19 来自:开发者社区

Flink CDC 里有一个表cdc同步的,今天少同步了几条数据,请问如何定位问题?

Flink CDC 里有一个表cdc同步的,今天少同步了几条数据,请问如何定位问题, 日志记录的都是统计数据。我看任务是正常的。

问答 2024-03-19 来自:开发者社区

flink cdc 3.0支持全库同步?

flink cdc 3.0支持全库同步?

问答 2024-03-19 来自:开发者社区

Flink CDC 里我用mysqlcdc做大数据量同步怎么处理?

Flink CDC 里我用mysqlcdc做大数据量同步。后面发现mysql常驻内存一直居高不下,都超过90%了。 然后我把mysqlcdc停了,mysql常驻内存也没有释放掉。 请问有没有好的解决办法?

问答 2024-03-19 来自:开发者社区

Flink CDC 里3.0支持SQLSVR的整库同步吗?

Flink CDC 里3.0支持SQLSVR的整库同步吗?

问答 2024-03-19 来自:开发者社区

Flink cdc同步postgresql的分区表支持?

Flink cdc同步postgresql的分区表支持?

问答 2024-03-19 来自:开发者社区

Flink CDC 里mysql->Doris的整库同步,没有成功自动建表以及同步数据?

Flink CDC 里java.lang.IllegalStateException: Failed to send request to coordinator: com.ververica.cdc.runtime.operators.schema.event.SchemaChangeRequest@3d93dee1 mysql->Doris的整库同步,没有成功自动建表以及同步数据?Fli...

问答 2024-03-19 来自:开发者社区

Flink CDC 里这里整库同步mysql的数据到doris 两台服务器 提交任务的时候报错?

在 Flink CDC 中同步 MySQL 数据到 Doris 时,我在尝试整库同步到两台服务器上,提交任务时遇到了错误。从提供的错误信息看,可能是由于不同网段的端口没有打通。想问的是,sink 端 Doris 需要打通哪些端口?出现的错误是否与端口有关,需要在网络上进行什么特别的配置吗,还是说这是我的服务器设置的问题?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注