文章 2020-03-13 来自:开发者社区

Apache Flink 进阶(四):Flink on Yarn/K8s 原理剖析及实践

作者:周凯波(宝牛) 整理:毛鹤 本文主要介绍 Flink on Yarn/K8s 的原理及应用实践,文章将从 Flink 架构、Flink on Yarn 原理及实践、Flink on Kubernetes 原理剖析三部分内容进行分享并对 Flink on Yarn/Kubernetes 中存在的部分问题进行了解答。 Flink 架构概览 Flink 架构概览–Job 用户通过 DataS...

Apache Flink 进阶(四):Flink on Yarn/K8s 原理剖析及实践
文章 2019-09-27 来自:开发者社区

Apache Flink : Checkpoint 原理剖析与应用实践

Checkpoint 与 state 的关系Checkpoint 是从 source 触发到下游所有节点完成的一次全局操作。下图可以有一个对 Checkpoint 的直观感受,红框里面可以看到一共触发了 569K 次 Checkpoint,然后全部都成功完成,没有 fail 的。 state 其实就是 Checkpoint 所做的主要持久化备份的主要数据,看下图的具体数据统计,其 state .....

Apache Flink : Checkpoint 原理剖析与应用实践
文章 2019-09-25 来自:开发者社区

Apache Flink 进阶(三):Checkpoint 原理解析与应用实践

作者:唐云(茶干) 大家好,今天我将跟大家分享一下 Flink 里面的 Checkpoint,共分为四个部分。首先讲一下 Checkpoint 与 state 的关系,然后介绍什么是 state,第三部分介绍如何在 Flink 中使用state,第四部分则介绍 Checkpoint 的执行机制。 Checkpoint 与 state 的关系 Checkpoint 是从 source 触发到下游所....

Apache Flink 进阶(三):Checkpoint 原理解析与应用实践

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注
相关镜像