问答 2023-09-18 来自:开发者社区

flink1.16 batch模式读取kafka任务不退出

做了如下设置 mEnv.setRuntimeMode(RuntimeExecutionMode.BATCH) KafkaSource.builder().setBounded(OffsetsInitializer.latest()) 代码能正常运行,但是读完kafka数据不退出 flink源码: /** * By default the KafkaSource is set to ru...

问答 2023-09-17 来自:开发者社区

Flink这种参数jar任务我们应该怎么提交,是直接设置就行了吗?

bin/flink run \ -Dexecution.checkpointing.interval=10s \ -Dparallelism.default=1 \ -c com.selectdb.flink.tools.cdc.CdcTools \ lib/flink-selectdb-connector-1.17-2.1.0-SNAPSHOT.jar \ mys...

问答 2023-09-13 来自:开发者社区

Flink任务 执行完savepoint后 对原来算子内部 增加了一个状态 任务能够恢复成功吗?

Flink任务 执行完savepoint后 对原来算子内部 增加了一个状态 任务能够恢复成功吗?

问答 2023-09-13 来自:开发者社区

Flink那位遇见提交flink on yarn 任务,yarn资源很足,报创建槽超时的错误?

Flink那位遇见提交flink on yarn 任务,yarn资源很足,但是提交的时候加载不到task Managers,cpu也分配不到,报创建槽超时的错误?

问答 2023-09-13 来自:开发者社区

Flink CDC任务接口比较简单,oracle-cdc 是 2.4.1 版本,能帮忙解答下吗?

Flink CDC任务接口比较简单,oracle-cdc 是 2.4.1 版本,没用到状态,就是读表,记录处理,写表,目前任务的空闲了,没有新增的记录,还是不能savepoint ,这个很困惑, 报错是总是卡在源表的处理上,看不出具体原因,网上 oracle-cdc 那些配置、oracle 数据库表归档日志都已打开,其他大佬们有遇到的,能帮忙解答下吗?按照 这里CDB 方式进行 oracle-.....

问答 2023-09-12 来自:开发者社区

有采集过mongodb数据吗,按照flink cdc官网的要求,任务启动后没有报错,也没有输出?

有采集过mongodb数据吗,按照flink cdc官网的要求,任务启动后没有报错,也没有输出?mongodb版本5.0,副本集部署,权限也是用官网上的?日志到这就不动了

问答 2023-09-12 来自:开发者社区

flink-oracle-cdc 2.4.1 cancel任务后从sp恢复的时候提示这个错误?

flink-oracle-cdc 2.4.1 cancel任务后从sp恢复的时候提示这个错误?2023-09-05 10:53:31,766 ERROR io.debezium.pipeline.ErrorHandler [] - Producer failurejava.sql.SQLException: ORA-01292: no log...

问答 2023-09-07 来自:开发者社区

Flink CDC 中flinksql开窗函数和窗口,在流任务下不支持表更新删除的source?

Flink CDC 中flinksql开窗函数和窗口,在流任务下不支持表更新删除的source,我现在所有源数据同步都是mysql-cdc和ogg,所有的数据湖表都是实时更新,有没有其他方案解决流任务下支持开窗函数和窗口呢,除非表不存在更新删除操作,是一条一条数据进入表,在流任务下开窗函数和窗口才能支持?

问答 2023-09-06 来自:开发者社区

Flink CDC我任务正常 但是数据一直不消费是什么情况?

Flink CDC我任务正常 但是数据一直不消费是什么情况?而且日志也就停留在了 12.10 但是没报错

问答 2023-09-06 来自:开发者社区

有哪位用过Flink CDC oracle cdc 抽取数据 任务能从savepoint恢复吗?

有哪位用过Flink CDC oracle cdc 抽取数据 支持新加表 任务能从savepoint恢复吗?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注