阿里云文档 2024-07-26

基于Flink平台同步MySQL数据至StarRocks

CTAS可以实现单表的结构和数据同步,CDAS可以实现整库同步或者同一库中的多表结构和数据同步。本文为您介绍如何使用实时计算Flink平台和E-MapReduce StarRocks通过CTAS&CDAS功能实现实时数仓中TP(Transaction Processing)和AP(Analytical Processing)数据同步的场景。

问答 2024-05-29 来自:开发者社区

flinkcdc mysql 在同步binlog时是同步一份还是多份给 flink?

flinkcdc中mysql 分库不分表的场景,需要同步多个表,flink sql 中会针对多个表有多个source ,那 mysql 在同步binlog时是同步一份还是多份给 flink? 担心原实例binlog同步给多个伪装的slaver,会影响性能...

问答 2024-04-24 来自:开发者社区

我自己的项目,本地跑起来了,数据也成功同步了。Flink上老是跑不起来,为什么?

我自己的项目,本地跑起来了,数据也成功同步了。Flink上老是跑不起来,为什么?

问答 2023-11-22 来自:开发者社区

我在这个任务里配置了7个表,只同步了前4个表,Flink是需要等待还是说我的配置问题?

我在这个任务里配置了7个表,资源的设置是这样子的 但是同步的时候 只同步了前4个表,Flink是需要等待还是说我的配置问题?

问答 2023-09-07 来自:开发者社区

可以只同步快照数据 然后flink-cdc退出么?

可以只同步快照数据 然后flink-cdc退出么?

问答 2023-07-19 来自:开发者社区

我想用cdas同步整库到paimon ,但是mysql库里面有个视图,Flink有其他办法排出吗?

问题1:我这边想用cdas同步整库到paimon ,但是mysql库里面有个视图,我试着加EXCLUDING TABLE 不生效,Flink有其他办法排出吗?问题2:老师我这边是建立mysql catlog 里面有视图也读过来了这种EXCLUDING TABLE 不生效,只写这个INCLUDING TABLE是可以的

问答 2023-07-13 来自:开发者社区

dataworks整库同步走的是flink-cdc?

dataworks整库同步走的是flink-cdc?

问答 2023-07-02 来自:开发者社区

求教,flinkcdcsql无法同步 geometry字段吗?按照文档,flink里声明的类型是

求教,flinkcdcsql无法同步 geometry字段吗?按照文档,flink里声明的类型是string,mysql里是point,cdc版本2.3,目前报错 java.sql.BatchUpdateException: Data truncation: Cannot get geometry object from data you send to the GEOMETRY field?

问答 2023-06-18 来自:开发者社区

请教大家一个问题:大家全量同步时会使用别的工具来同步吗?还是只使用Flink CDC就可以?2亿左右

请教大家一个问题:大家全量同步时会使用别的工具来同步吗?还是只使用Flink CDC就可以?2亿左右数据?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注