问答 2025-05-06 来自:开发者社区

flink用rocksdb作为状态后端,taskmanager重启后rocksdb目录文件会被清空

flink使用rocksdb作为状态后端,当taskmanager重启后,rocksdb中的文件会被清空,是正常的吗?flink.conf关键配置如下: execution.checkpointing.externalized-checkpoint-retention: RETAIN_ON_CANCELLATIONexecution.checkpointing.max-concurrent-ch....

问答 2024-04-10 来自:开发者社区

java flink + kafka,后端状态放hdfs后,每次重启服务,又从最早的消息开始消费问题

java flink + kafka,后端状态放hdfs后,每次重启服务,又从最早的消息开始消费,不是每次会提交检查点到hdfs吗,重启后,不应从最新的检查点开始处理么?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注