[帮助文档] 基于eRDMA部署高网络性能的Kafka集群

基于支持eRDMA能力的ECS实例部署Kafka集群,可以充分利用eRDMA提供的低延迟、高吞吐以及低CPU占用等特性,以优化Kafka集群内部节点间的数据传输效率,适用于对消息吞吐量和时延要求较高的应用场景。本文介绍如何基于支持eRDMA能力的ECS实例部署Kafka集群,并测试eRDMA对Kaf...

[帮助文档] 为Confluent集群开启公网_云消息队列 Confluent 版_云消息队列 Kafka 版(Kafka)

如果需要通过公网接入云消息队列 Confluent 版,您可以为集群开启公网。

消息队列Kafka入门课程

4 课时 |
3098 人已学 |
免费

分布式消息系统 Kafka 快速入门

24 课时 |
640 人已学 |
免费
开发者课程背景图

[帮助文档] Confluent集群网络访问与安全设置_云消息队列 Confluent 版_云消息队列 Kafka 版(Kafka)

本文介绍如何进行云消息队列 Confluent 版集群的网络访问与安全设置。

[帮助文档] 使用Cluster Linking复制Kafka集群数据_云消息队列 Confluent 版_云消息队列 Kafka 版(Kafka)

Cluster Linking是Confluent Platform提供的一种功能,用于将多个Kafka集群连接在一起。该功能允许不同的Kafka集群之间进行数据的镜像和复制。Cluster Linking将在数据目标(Destination)集群启动,并复制数据源(Source)集群的数据到目标集...

[帮助文档] 评估Confluent集群规格_云消息队列 Confluent 版_云消息队列 Kafka 版(Kafka)

对于云消息队列 Confluent 版集群来说,影响资源使用的因素众多,包括使用的业务场景、业务应用程序性能等,本文结合一般场景给出云消息队列 Confluent 版集群资源评估参考建议,帮助您在购买创建集群时评估集群规模。在集群创建完成后,您仍然可以根据实际的资源使用率进行集群扩容来变更集群的资源...

Flink集群使用kafka_appender收集flink产生的日志,但是现在实时运行的任务超过了

Flink日志采集有多种方式,具体选择哪种方式需要根据实际情况来定。以下是一些常见的方法: 使用KafkaAppender:使用KafkaAppender可以将Flink的日志收集到Kafka中,方便后续的存储和分析。但是,当Flink的任务数量较多时,可能会导致Kafka集群的压力增大,需要采取一...

Flink集群使用kafka_appender收集flink产生的日志,但是现在实时运行的任务超过了

Flink集群使用kafka_appender收集flink产生的日志,但是现在实时运行的任务超过了三千个,运行的yarn-container有20万+。导致存储日志的kafka集群连接数过多,kafka集群压力有点大,请教各位大佬flink日志采集这块还有什么好的方式吗

FLUME集群采集mysql到kafka集群出现重复数据

各位大佬,请问一下按照一下配置,FLUME集群将MYSQL数据写入到kafka集群(MYSQL-->FLUME集群-->KAFKA集群,数据可以进入kafka的TOPIC,但是出现了5条重复数据。FLUME集群设计,AGENT1/AGENT2/AGENG3对应HOST1/HOST2/HO...

FLUME1.9集群采集mysql到kafka出现重复数据

各位大佬,请问一下按照一下配置,FLUME集群将MYSQL数据写入到kafka集群(MYSQL-->FLUME集群-->KAFKA集群,数据可以进入kafka的TOPIC,但是出现了5条重复数据。FLUME集群设计,AGENT1/AGENT2/AGENG3对应HOST1/HOST2/HO...

如何配置FLUME集群将MYSQL数据写入到kafka集群?

各位大佬好!请教如何配置FLUME(1.9)集群将MYSQL数据写入到kafka(2.12-2.5)集群(MYSQL-->FLUME集群(未配置完成)-->KAFKA集群(已经配置完成)),以下是找到的配置资料,还不完整,请帮完成。FLUME集群设计,AGENT1/AGENT2/AGEN...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

消息队列
消息队列
消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。
20+人已加入
加入
相关电子书
更多
任庆盛|Flink CDC + Kafka 加速业务实时化
消息队列 Kafka 版差异化特性
2019大数据技术公开课第五季—kafka 数据如何同步到 MaxCompute
立即下载 立即下载 立即下载