问答 2025-02-27 来自:开发者社区

Flink 控制台Cancel Job,然后重新提交任务,此时是全量同步,还是增量同步?

如果在 Flink 控制台上点击取消任务(Cancel Job),然后bash bin/flink-cdc.sh tools/test_to_doris.yaml --flink-home /usr/local/flink-1.18.0doris提交任务,此时会进行全量同步,还是增量同步

问答 2024-08-26 来自:开发者社区

flink cdc 最新版支持一个任务同步多个库吗?

flink cdc 最新版支持一个任务同步多个库吗?

问答 2024-08-07 来自:开发者社区

在Flink CDC中,flink sql任务同步mysql数据时,可能是什么原因?

在Flink CDC中,flink sql任务同步mysql数据时,taskmanager日志中存在报错,但是任务没挂,全量数据也没同步到upsert-kafka中,请问大佬们可能是什么原因?

文章 2024-07-16 来自:开发者社区

实时计算 Flink版产品使用问题之在进行数据同步时,重新创建了一个新的任务,但发现无法删除旧任务同步的历史数据,是什么导致的

问题一:有没有 知道 flink operator 默认添加的这个 confimap 我怎么修改啊 ? 有没有 知道 flink on k8s operator , operator 默认添加的这个 confimap 我怎么修改啊 ?我重新制作了一个flink 镜像 修改了 log4j-console.properties 但是容器启动后 还是用 原来 的log4j-console.pr...

实时计算 Flink版产品使用问题之在进行数据同步时,重新创建了一个新的任务,但发现无法删除旧任务同步的历史数据,是什么导致的
问答 2024-06-26 来自:开发者社区

在Flink CDC中有版本支持oracle动态加表吗(一个任务同步多张表,可以动态添加订阅)?

在Flink CDC中有版本支持oracle动态加表吗(一个任务同步多张表,可以动态添加订阅),根据收集的信息mysql、sqlserver是支持的,但是oracle还未支持?

文章 2024-06-15 来自:开发者社区

实时计算 Flink版产品使用问题之任务在同步过程中新增同步表后选择全量初始化历史数据,是否会阻塞原先其余表的增量同步

问题一:Flink cdc在同步过程中新增同步表后选择全量初始化历史数据,会阻塞原先其余表的增量同步吗? Flink cdc任务在同步过程中新增同步表后选择全量初始化历史数据,会阻塞原先其余表的增量同步么? 参考答案: 新增表不影响其他,有个feature是新增表不断流。增量数据从任务开始就在同步了。历史数据同步及binlog同步在全量阶段是并行执行的...

实时计算 Flink版产品使用问题之任务在同步过程中新增同步表后选择全量初始化历史数据,是否会阻塞原先其余表的增量同步
问答 2024-06-12 来自:开发者社区

在Flink CDC中Pipeline为什么只有在提交任务的时候才会同步 变动的数据不会同步?

在Flink CDC中Pipeline为什么只有在提交任务的时候才会同步 变动的数据不会同步?

文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之同步数据到Doris的任务中,遇到在继续同步后再次点击下线无法下线,如何处理

问题一:请问在flink同步数据到doris的任务中,在继续同步后再次点击下线无法下线的问题有办法解决吗? 请问在flink同步数据到doris的任务中,任务上线后第一次下线可以正常产生savepoint并且可以从savepoint开始继续同步,但是在继续同步后再次点击下线无法下线的问题有办法解决吗? 参考答案: 在 Flink 同步数据到 Doris...

问答 2024-04-26 来自:开发者社区

Flink cdc任务在同步过程中 新增同步表后选择全量初始化历史数据,什么时候开始增量?

Flink cdc任务在同步过程中 新增同步表后选择全量初始化历史数据,如果十几个小时才能初始化完成,无锁算法开始增量的时候是从十几个小时前的binlog位点增量还是从当前时间位点增量?(如果是从十几个小时前的binlog位点衔接增量,如果binlog已经归档了,就会报错文件找不到)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注