在Flink CDC中为什么提交的cdc任务无法看到TM的日志,只能通过yarn logs的命令?

在Flink CDC中为什么提交的cdc任务无法看到TM的日志,只能通过yarn logs的命令看到日志?

flinkcdc面对500g的数据 flink on yarn的部署模式 tm分配多少合适哇?

flinkcdc面对500g的数据 flink on yarn的部署模式 tm分配多少合适哇?

Hadoop 分布式资源管理框架 YARN

5 课时 |
438 人已学 |
免费
开发者课程背景图

我运行了这个yarn-session.sh -n 2 -s 6 -jm 1024 -tm#Flink

我运行了这个yarn-session.sh -n 2 -s 6 -jm 1024 -tm 1024 -nm test -d,报上面那个错,我不明白运行上面那个为什么会去写数据有大佬帮忙解释下嘛?#Flink

Flink on yarn作业如何确定使用多少个tm,每个tm多大内存,每个tm多少 #Flink

Flink on yarn作业如何确定使用多少个tm,每个tm多大内存,每个tm多少slot,使用多少核,整体多少并行度,有没有方法论? #Flink

flink on yarn时,jm和tm占用的内存最小是600M,这个可以修改吗?我在flink-c

flink on yarn时,jm和tm占用的内存最小是600M,这个可以修改吗?我在flink-conf.yaml里面配置了,但是不生效。 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

阿里巴巴终端技术
阿里巴巴终端技术
阿里巴巴终端技术最新内容汇聚在此,由阿里巴巴终端委员会官方运营。阿里巴巴终端委员会是阿里集团面向前端、客户端的虚拟技术组织。我们的愿景是着眼用户体验前沿、技术创新引领业界,将面向未来,制定技术策略和目标并落地执行,推动终端技术发展,帮助工程师成长,打造顶级的终端体验。同时我们运营着阿里巴巴终端域的官方公众号:阿里巴巴终端技术,欢迎关注。
1506+人已加入
加入
相关电子书
更多
基于Docker on Yarn系统的微服务实践
深度学习+大数据 TensorFlow on Yarn
Docker on Yarn 微服务实践
立即下载 立即下载 立即下载