问答 2023-01-09 来自:开发者社区

请教大家个问题,flink 增量checkpoint, 如果是yarn per-job模式起任务,任

请教大家个问题,flink 增量checkpoint, 如果是yarn per-job模式起任务,任务挂掉了,后面手动指定上一次checkpoint启动任务 ,state是完整的吗?我理解的是增量 checkpoint 仅包含上次 checkpoint 和本次 checkpoint 之间状态的差异,手动指定的只是这个差异部分,并不是完整的checkpoint,是吗?

阿里云文档 2022-12-29

Dataphin终止SparkSQL任务实例后,底层Yarn作业也会终止

概述Dataphin中运维页面终止Spark SQL任务实例后,底层Yarn作业也会终止。详细信息Dataphin中运维页面终止Spark SQL任务实例后,底层Yarn作业任务也会终止或者关闭。适用于Dataphin公共云V3.5.6

问答 2022-02-15 来自:开发者社区

yarn Per-Job Cluster Mode提交任务时 通过cli指定的内存参数无效

$stringUtil.substring( $!{XssContent1.description},200)...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

阿里巴巴终端技术

阿里巴巴终端技术最新内容汇聚在此,由阿里巴巴终端委员会官方运营。阿里巴巴终端委员会是阿里集团面向前端、客户端的虚拟技术组织。我们的愿景是着眼用户体验前沿、技术创新引领业界,将面向未来,制定技术策略和目标并落地执行,推动终端技术发展,帮助工程师成长,打造顶级的终端体验。同时我们运营着阿里巴巴终端域的官方公众号:阿里巴巴终端技术,欢迎关注。

+关注