问答 2023-07-26 来自:开发者社区

Flink CDC中可以拿到数据了,但是跑一段时间任务就OOM了,看了下背压很严重啊,怎么解决?

"问题1:Flink CDC中可以拿到数据了,但是跑一段时间任务就OOM了,看了下背压很严重啊,怎么解决?动态表是最细的表,通过动态表的一条数据在另外两个维表里最多只查出来一条数据。问题2:p 48 -Dyarn.application.queue=default -Dtaskmanager.numberOfTaskSlots=4 -Djobmanager.memory.process.size....

问答 2023-07-26 来自:开发者社区

Flink CDC中我flink任务是这个没有滚动的生成。这个滚动日志怎么配啊?

Flink CDC中我flink任务是用 flink run-application -t yarn-application 的方式运行在yarn上的。现在问题是任务日志一直是一个,没有滚动的生成。这个滚动日志怎么配啊?我根据官网的说法修改了log4j-cli.properties 和log4j-session.properties 配置

问答 2023-07-26 来自:开发者社区

Flink CDC中2.2.1切换2.4.0,旧任务的存档点还能用吗,只升级版本依赖,不改逻辑。

Flink CDC中2.2.1切换2.4.0,旧任务的存档点还能用吗,只升级版本依赖,不改逻辑。

问答 2023-07-26 来自:开发者社区

Flink CDC中这个动态加表,昨天新启任务,新加的表它不读全量增量它也不读了,什么原因?

Flink CDC中这个动态加表,昨天新启任务,新加的表从全量阶段读,我今天把任务停了,重新启动,它这回不读全量了,但是新加的那几张表,增量它也不读了,什么原因?我想知道的一点是,新加的表,是一定会先做全量快照吗?因为我看到jm日志还是在做 split,切片太多 JM给我干OOM了。而且新加的表的切片,切片大小好chunk.size好像和我配置的不一样,好像没生效,还是8096。我现在是有几张.....

问答 2023-07-25 来自:开发者社区

flink作业能自动从sp中恢复任务吗?还是说必须手动指定-s来恢复

flink作业能自动从sp中恢复任务吗?还是说必须手动指定-s来恢复

问答 2023-07-25 来自:开发者社区

想问下 flink任务运行130天 gc70次 这个正常吗?任务都也没报错 ,大概啥频率才算

想问下 flink任务运行130天 gc70次 这个正常吗?任务都也没报错 ,大概啥频率才算不正常了我看都是tm满了 才触发gc

问答 2023-07-25 来自:开发者社区

大佬,Flink中你那个资源申请不到怎么解决的?那个配置,任务还是yarn,你那边给的多少呢

大佬,Flink中你那个资源申请不到怎么解决的?那个配置,任务还是yarn,你那边给的多少呢

问答 2023-07-25 来自:开发者社区

Flink这种没有任何异常的任务,为什么没有成功同步数据啊?从哪方面可以排查错误?

Flink这种没有任何异常的任务,为什么没有成功同步数据啊?从哪方面可以排查错误?

问答 2023-07-25 来自:开发者社区

Flink如果要更新下版本,把现有的任务停止保存状态,然后修改引擎后重新提交,就可以是吧?

Flink如果要更新下版本,把现有的任务停止保存状态,然后修改引擎后重新提交,就可以是吧?

问答 2023-07-25 来自:开发者社区

Flink之前任务配置的引擎版本,现在看到后续又更新了好几个版本,这个任务中的版本不更新会有影响没?

Flink之前任务配置的引擎版本,现在看到后续又更新了好几个版本,这个任务中的版本不更新会有影响没?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注