基于 Log 的通用增量 Checkpoint

基于 Log 的通用增量 Checkpoint

摘要:本文整理自阿里巴巴开发工程师,Apache Flink Contributor 俞航翔,在 Flink Forward Asia 2022 核心技术专场的分享。本篇内容主要分为四个部分: Checkpoint 性能优化之路 Changelog 机制解析 Changelog 性能测试 总结与规划...

基于 Log 的通用增量 Checkpoint 在美团的进展

基于 Log 的通用增量 Checkpoint 在美团的进展

摘要:本文整理自美团计算引擎工程师王非凡,在 Flink Forward Asia 2022 核心技术专场的分享。本篇内容主要分为四个部分: Log based Checkpoint 基本原理介绍 美团应用场景及测试效果 Changelog Restore 性能优化 Changelog 存储选型探索...

日志服务SLS实现云产品可观测

13 课时 |
14 人已学 |
免费

日志服务 SLS 可观测数据分析平台介绍

1 课时 |
135 人已学 |
免费

大数据知识图谱系列—基于ELK+Flink日志全观测最佳实践

1 课时 |
174 人已学 |
免费
开发者课程背景图
基于 Log 的通用增量 Checkpoint

基于 Log 的通用增量 Checkpoint

摘要:本文整理自 Apache Flink Contributor 俞航翔在 9 月 24 日 Apache Flink Meetup 的演讲。主要内容包括:Checkpoint 性能优化之路解析 Changelog一览 State/Checkpoint 优化点击查看直播回放 & 演讲PPT...

问一下。Flink checkpoint 这种情况有人遇到过没。日志并没有报错信息。

问一下。Flink checkpoint 这种情况有人遇到过没。日志并没有报错信息。

有没有遇到checkpoint无法完成并且pg数据库的wal日志一直堆积的情况啊?

flink cdc采集pgsql有没有遇到checkpoint无法完成并且pg数据库的wal日志一直堆积的情况啊

由于CHECKPOINT后,每个回放页面的第几条WAL日志都是备份日志?

由于CHECKPOINT后,每个回放页面的第几条WAL日志都是备份日志?

当checkpoint发生的时候,它会向xlog日志中写入一条checkpoint日志,这条chec

当checkpoint发生的时候,它会向xlog日志中写入一条checkpoint日志,这条checkpoint日志包含了当前的什么位点?

怎么屏蔽flink checkpoint 打印的info 日志?

怎么屏蔽flink checkpoint 打印的info 日志? 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

storm消费消费 Loghub 日志的checkpoint问题

当storm重启后,是从默认的END_CURSOR处开始消费日志,还是从上次的checkpoint处消费日志

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

社区圈子

阿里云日志服务SLS
阿里云日志服务SLS
SLS是一站式云原生可观测性数据平台,一站式提供数据采集、加工、查询与分析、可视化等功能。日常更新产品最新动态,最佳实践以及技术大咖的观点和经验。
4+人已加入
加入
相关电子书
更多
《云原生Elasticsearch增强版助力10倍日志写入性能提升》
《手把手学习日志服务SLS,云启实验室实战指南》电子书
俞航翔|基于Log的通用增量Checkpoint
立即下载 立即下载 立即下载