问答 2023-09-20 来自:开发者社区

Flink CDC中任务报错 有啥参数能调整吗 还是说一定要改下代码呀?

Flink CDC中任务报错Not all required tasks are currently running 有啥参数能调整吗 还是说一定要改下代码呀?

问答 2023-09-20 来自:开发者社区

Flink CDC已经上线的任务,后续进行表结构变更新增字段,这种对数据没啥影响吧?

Flink CDC已经上线的任务,后续进行表结构变更新增字段,无状态启动从指定时间,这种对数据没啥影响吧?

问答 2023-09-20 来自:开发者社区

Flink CDC只同步了部分数据,就不同步了. 任务还是 Runing状态?

Flink CDC同步 RDS mysql 时,只同步了部分数据,就不同步了. 任务还是 Runing状态?flink-1.17.0flink-sql-connector-mysql-cdc-2.4.1表里一共有200多万条数据 只同步了2万多条就不同步了

问答 2023-09-20 来自:开发者社区

flink任务遇到这个报错有什么排查思路吗?

flink任务遇到这个报错有什么排查思路吗?

问答 2023-09-19 来自:开发者社区

Sink任务都是并发,这个用Flink SQL有没有办法做到我想要的效果呢?

我现在用的是Flink 1.16 版本,目前我有这么一个需求,在一个任务中,我会消费Kafka的消息(source),结合已有的表,生成3个结果表,分别Sink到PG的3个表中,当这3个Sink完成后,我还需要Sink一条消息回Kafka中,告诉别人我这个任务已民经完成了。目前我了解下来,Sink任务都是并发,这个用Flink SQL有没有办法做到我想要的效果呢?

问答 2023-09-18 来自:开发者社区

flink1.16 batch模式读取kafka任务不退出

做了如下设置 mEnv.setRuntimeMode(RuntimeExecutionMode.BATCH) KafkaSource.builder().setBounded(OffsetsInitializer.latest()) 代码能正常运行,但是读完kafka数据不退出 flink源码: /** * By default the KafkaSource is set to ru...

问答 2023-09-17 来自:开发者社区

Flink这种参数jar任务我们应该怎么提交,是直接设置就行了吗?

bin/flink run \ -Dexecution.checkpointing.interval=10s \ -Dparallelism.default=1 \ -c com.selectdb.flink.tools.cdc.CdcTools \ lib/flink-selectdb-connector-1.17-2.1.0-SNAPSHOT.jar \ mys...

问答 2023-09-13 来自:开发者社区

Flink任务 执行完savepoint后 对原来算子内部 增加了一个状态 任务能够恢复成功吗?

Flink任务 执行完savepoint后 对原来算子内部 增加了一个状态 任务能够恢复成功吗?

问答 2023-09-13 来自:开发者社区

Flink那位遇见提交flink on yarn 任务,yarn资源很足,报创建槽超时的错误?

Flink那位遇见提交flink on yarn 任务,yarn资源很足,但是提交的时候加载不到task Managers,cpu也分配不到,报创建槽超时的错误?

问答 2023-09-13 来自:开发者社区

Flink CDC任务接口比较简单,oracle-cdc 是 2.4.1 版本,能帮忙解答下吗?

Flink CDC任务接口比较简单,oracle-cdc 是 2.4.1 版本,没用到状态,就是读表,记录处理,写表,目前任务的空闲了,没有新增的记录,还是不能savepoint ,这个很困惑, 报错是总是卡在源表的处理上,看不出具体原因,网上 oracle-cdc 那些配置、oracle 数据库表归档日志都已打开,其他大佬们有遇到的,能帮忙解答下吗?按照 这里CDB 方式进行 oracle-.....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注