阿里云文档 2024-10-15

如何在EMR Kafka 2.4.1版本进行Kafka磁盘故障运维

磁盘故障及其运维通常伴随着磁盘上的数据销毁。在进行磁盘运维时,您应考虑数据是否需要迁移备份。对于Kafka集群,您还需要考虑Topic分区副本数据是否可以从其他Broker节点分区副本同步恢复。本文以EMR Kafka 2.4.1版本为例,介绍Kafka磁盘故障运维的操作。

阿里云文档 2023-12-28

应用监控在Kafka异步消息通讯场景下进行链路追踪_应用监控_应用实时监控服务(ARMS)

从2.7.1.2探针版本开始,ARMS应用监控增加了Kafka插件,在基于Kafka进行异步消息通讯的场景中,也可以实现链路追踪。本文介绍支持链路追踪的Kafka版本要求,以及如何配置Kafka插件。

文章 2022-05-30 来自:开发者社区

Flink与Kafka版本对应关系

先上干货:以下为Flink和Kafka的版本对照表Flink版本Kafka版本1.12.X2.4.11.11.X2.4.11.10.X2.2.11.9.X2.2.01.8.X2.0.11.7.X2.0.10.10.x0.8.2.00.9.x0.8.2.0最近在使用Flink进行Kafka吞吐量测试时,遇到了以下问题导致程序无法运行去网上查资料也没有很直接的解决方法,大致也就是说是Flink与Ka....

Flink与Kafka版本对应关系
问答 2021-12-07 来自:开发者社区

flink new source api, kafka部分对kafka-client的版本要求。

如题,当前新的kafaksouce貌似对kafka-client版本做了依赖,比如代码KafkaPartitionSplitReader.acquireAndSetStoppingOffsets方法中用到的 consumer.committed(partitionsStoppingAtCommitted) .forEach( (tp, offsetAndMetadata) -> { Prec...

问答 2021-12-07 来自:开发者社区

blink 版本 消费kafka 看不到group id

现象 使用这个pom ,在kafka 里看不到group id com.alibaba.blink flink-streaming-scala_2.11 blink-3.2.2 org.slf4j slf4j-api ...

问答 2021-12-03 来自:开发者社区

Flink1.12.0版本 FlinkStreaming如何将偏移量提交到kafka呢?

问题如上,有哪位可以帮忙解答下吗?*来自志愿者整理的FLINK邮件归档

问答 2020-05-13 来自:开发者社区

flink-kafka用的什么版本哇?支持kafka2.4吗?或者kafka2.0以上 #Flink

flink-kafka用的什么版本哇?支持kafka2.4吗?或者kafka2.0以上的版本? #Flink

文章 2020-05-12 来自:开发者社区

Kafka SparkStreaming 保证数据不丢失问题 >0.10版本

sparkstreaming 处理kafka数据,几种数据丢失的情况,1、雪崩效应导致的异常 kill掉进程 ,导致数据丢失2、程序bug 导致进程挂了,导致数据丢失以上是使用自动提交offset会存在的问题,若要保证数据0丢失,需要使用offset commit api手动提交offset,自己保存offset,自己提交处理完的offset。http://spark.apache.org/...

问答 2020-03-28 来自:开发者社区

消息队列 Kafka 版的API版本有哪些?

消息队列 Kafka 版的API版本有哪些?

问答 2019-12-06 来自:开发者社区

大佬们,flink 1.9.0版本里DataStream api,若从kafka里加载完数据以后,从

大佬们,flink 1.9.0版本里DataStream api,若从kafka里加载完数据以后,从这一个流中获取数据进行两条业务线的操作,是可以的吗?能不能重复的去处理这一个流中的数据 本问题来自阿里云开发者社区的【11大垂直技术领域开发者社群】。 点击这里欢迎加入感兴趣的技术领域群。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

消息队列

消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。

+关注