文章 2024-07-16 来自:开发者社区

实时计算 Flink版产品使用问题之在使用Flink on yarn模式进行内存资源调优时,如何进行优化

问题一:flink的applcation model模式和sql client可以一起用吗 flink的applcation model模式和sql client可以一起用吗,如何使用呢,如果不能使用,生产环境pre-job和session模式哪个模式会更好 参考答案: Apache Flink 支持多种部署模式,包括 Application Mode...

实时计算 Flink版产品使用问题之在使用Flink on yarn模式进行内存资源调优时,如何进行优化
文章 2024-07-16 来自:开发者社区

实时计算 Flink版产品使用问题之在Flink on Yarn模式下,如何对job作业进行指标监控

问题一:flink1.14的网络缓存消胀机制,如果只是逻辑减少buffer的大小,这是不是会导致内存浪费? flink1.14的网络缓存消胀机制,如果只是逻辑减少buffer的大小,并物理的大小不变,这是不是会导致内存浪费?它是会改变所有的subtask的buffer大小吗?还是只有某个subtask? 参考答案: Flink 1.14的网络缓存消胀机...

实时计算 Flink版产品使用问题之在Flink on Yarn模式下,如何对job作业进行指标监控
文章 2024-06-17 来自:开发者社区

实时计算 Flink版操作报错合集之flink on yarn job manager 可以启动, 但不给分配slot ,是什么原因

问题一:Flink中打算使用datastream开发 设置好参数 运行就报这错 ,是为啥? Flink中打算使用datastream开发 设置好参数 运行就报这错 ,是为啥? 参考回答: 麻烦您看一下这篇文档,看看是不是这几个原因呢 https://blog.csdn.net/weixin_42376686/article/details/1240068...

实时计算 Flink版操作报错合集之flink on yarn job manager 可以启动, 但不给分配slot ,是什么原因
文章 2024-05-23 来自:开发者社区

实时计算 Flink版产品使用合集之flink-cdc.sh xx.yaml提交到yarn 发现没有启动task manager的,怎么处理

问题一:Flink CDC这个是干啥用的啊? Flink CDC这个是干啥用的啊?org/apache/flink/shaded/guava31/com/google/common/util/concurrent/ThreadFactoryBuilder 参考答案: java工具包 关于本问题的更多回答可点击进行查看: ...

实时计算 Flink版产品使用合集之flink-cdc.sh xx.yaml提交到yarn 发现没有启动task manager的,怎么处理
文章 2024-05-18 来自:开发者社区

实时计算 Flink版产品使用合集之Flink on YARN 下,任务代码中通过 JobListener 监听任务状态,onJobSubmitted 和 onJobExecuted 同时触发如何解决

问题一:Flink这个问题怎么解决? Flink这个问题怎么解决?Flink on yarn,任务代码里想通过jobListener监听任务状态,onJobSubmitted 和onJobExecuted同时触发,回调没生效。 参考回答: 抱歉哈,云上没有on yarn的环境,您应该是开源自建,请参考群公告进社区群。 关于本问题的更多...

实时计算 Flink版产品使用合集之Flink on YARN 下,任务代码中通过 JobListener 监听任务状态,onJobSubmitted 和 onJobExecuted 同时触发如何解决
文章 2024-05-17 来自:开发者社区

实时计算 Flink版产品使用合集之1.13版本上部署一个flink1.17为什么任务启动一直accepted状态yarn的,有什么排查方向吗资源什么的都是充足的

问题一:yarn上不能部署两个不同版本的flink客户端吗? yarn上不能部署两个不同版本的flink客户端吗? 这个状态一直这样 参考回答: YARN上确实不能同时部署两个不同版本的Fl...

实时计算 Flink版产品使用合集之1.13版本上部署一个flink1.17为什么任务启动一直accepted状态yarn的,有什么排查方向吗资源什么的都是充足的
文章 2024-05-16 来自:开发者社区

实时计算 Flink版产品使用合集之 Flink on YARN 中使用滚动日志时配置不生效如何解决

问题一:求问大家 ,flinksql 在idea调试都没问题 窗口触发都能出结果 ,部署到集群上就没反应了? 求问大家 ,flinksql 在idea调试都没问题 窗口触发都能出结果 ,部署到集群上就没反应了, 查看日志有数据数据读取到 就发不出去发kafka 。 就算使用无窗口sql select* 也发不出去数据 。版本是1.16 有没有人遇到类问题 。 ...

实时计算 Flink版产品使用合集之 Flink on YARN 中使用滚动日志时配置不生效如何解决

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注