请教个 flink 跑批任务的问题 我们的集群跑在 k8s 上面,想请教下为什么会出现这种问题?

请教个 flink 跑批任务的问题 我们的集群跑在 k8s 上面,跑某些数据量大的批任务的时候几乎 100% 会失败,查原因都是某个 taskmanager 被 cgroup 杀掉了,看 gc 日志 heap 这些内存的占用并不高 想请教下为什么会出现这种问题? 有没有什么参数可以控制内存的使用?

集群模式下 flink 如果是k8s 的application的话还支持这样吗?

集群模式下 flink 可以通过-C 指定额外的外部包启动,如果是k8s 的application的话还支持这样吗?

使用ASK容器化部署大语言模型FastChat

1 课时 |
16 人已学 |
免费

如何在 ACK 中使用 MSE Ingress

1 课时 |
114 人已学 |
免费

从概念、部署到优化,Kubernetes Ingress 网关的落地实践

1 课时 |
188 人已学 |
免费
开发者课程背景图

Flink三种集群模式,Standalone模式,Flink On YARN,Flink On K8S,这三种模式有啥优缺点,生产环境如何选择呢?

Apache Flink有三种主要的集群部署模式:Standalone模式、Flink On YARN、Flink On Kubernetes。 Standalone模式:这是Flink最基本的部署模式,它不需要任何外部框架就可以独立工作。在这种模式下,所有的Flink组件(如JobManager、...

Flink CDC1.18跑在k8s,任务提交上去,几十秒自动cancel了,了解吗?

Flink CDC1.18跑在k8s,任务提交上去,几十秒自动cancel了,flink1.13版本没啥问题,有大佬了解吗?

你的Flink CDC在尝试向Kubernetes部署时遇到了问题

从错误信息来看,你的Flink CDC在尝试向Kubernetes部署时遇到了问题。错误信息提示PUT操作执行失败,这通常是由于某种资源未定义引起的。 以下是一些可能的原因和解决方案: Kubernetes配置问题:检查你的Kubernetes配置是否正确,包括namespace、pod、servi...

Flink CDC谁有用Native Kubernetes 部署flink 啊?

Flink CDC谁有用Native Kubernetes 部署flink 啊,我部署了跑不起来,java 和python都起不来?看着挺简单的。但是一直报错,用kubekey 部署的单节点k8s

Flink Kubernetes Operator 和Native Kubernetes 有啥区别?

Flink Kubernetes Operator 和Native Kubernetes 有啥区别啊?

Flink CDC用那种方式部署在k8s里面的?

Flink CDC用那种方式部署在k8s里面的?

请问一下Flink:我将docker镜像推到k8s上报错(如下图)。请问是什么原因呀?

请问一下Flink:我将docker镜像推到k8s上报错(如下图)。请问是什么原因呀?

flink k8s flinksessionjob 不能正常操作了?

flink k8s flinksessionjob 不能正常操作了?Jar upload dir /tmp/flink-web-845bb65d-a21d-4a16-abd2-966d7bd60e02/flink-web-upload does not exist, or had been dele...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

阿里云容器服务 ACK
阿里云容器服务 ACK
云端最佳容器应用运行环境,安全、稳定、极致弹性
234774+人已加入
加入
相关电子书
更多
阿里巴巴大数据产品最新特性介绍—实时计算 Flink on Kubernetes
容器服务 ACK 加速企业应用现代化升级
智算时代,基于 Kubernetes 落地云原生 AI
立即下载 立即下载 立即下载
相关镜像

容器服务Kubernetes版flink相关内容