构建云消息队列 Kafka 版的相关内容

阿里云文档 2026-03-02

如何使用Filebeat+Kafka+Logstash+Elasticsearch构建日志分析系统

随着时间的积累，日志数据会越来越多，当您需要查看并分析庞杂的日志数据时，可通过Filebeat+Kafka+Logstash+Elasticsearch采集日志数据到阿里云Elasticsearch中，并通过Kibana进行可视化展示与分析。本文介绍具体的实现方法。

文章 2025-09-12 来自：开发者社区

构建高效的实时数据管道：Flink、Kafka、CnosDB 的完美结合

阿里云文档 2025-09-04

如何快速构建一个从Kafka到Hologres的数据同步作业

本文为您介绍如何通过实时计算控制台快速构建从Kafka到Hologres的数据同步作业，实现日志数据的实时入仓部署。

文章 2024-11-03 来自：开发者社区

构建高可用性Apache Kafka集群：从理论到实践

引言随着大数据时代的到来，数据传输与处理的需求日益增长。Apache Kafka作为一个高性能的消息队列服务，因其出色的吞吐量、可扩展性和容错能力而受到广泛欢迎。然而，在构建大规模生产环境下的Kafka集群时，保证其高可用性是至关重要的。本文将从个人实践经验出发，详细介绍如何构建一个高可用性的Kafka集群，包...

问答 2024-08-05 来自：开发者社区

函数计算构建时报这个错误，这个函数设置了一个Kafka的触发器怎么办？

函数计算构建时报这个错误，这个函数设置了一个Kafka的触发器？

文章 2024-06-26 来自：开发者社区

AutoMQ：基于 Regional ESSD 构建十倍降本的云原生 Kafka

在本次技术深度分享中，将围绕AutoMQ关于云原生设计的理念、AutoMQ的云原生架构、AutoMQ相对于原生的Apache、Kafka在技术和产品上的优势及基于云存储技术、产品的创新展望四个板块进行介绍，揭秘AutoMQ是如何基于阿里云Regional ESSD构建十倍降本的云原生Kafka。 1. AutoMQ 云原生架构理念首先，我们对云服务做了四个成熟度的划分，包括云托...

阿里云文档 2023-05-25

如何基于云HBase和Spark构建一体化的数据处理平台

云HBase X-Pack是基于Apache HBase、Phoenix、Spark深度扩展，融合Solr检索等技术，支持海量数据的一站式存储、检索与分析。融合云Kafka+云HBase X-Pack能够构建一体化的数据处理平台，支持风控、推荐、检索、画像、社交、物联网、时空、表单查询、离线数仓等场景，助力企业数据智能化。

文章 2022-10-20 来自：开发者社区

1.解压2.修改配置broker.id:单机不修改listeners:默认9092端口log.dirs：注意：这个目录不是存储日志的，是存储Kafka中核心数据的目录，这个目录默认是指向的tmp目录，所以建议修改一下zookeeper.connect：kafka依赖的zookeeper如果kafka和zookeeper在同一台机器上，并且zookeeper监听的端口就是那个默认的2181端口cd....

文章 2022-02-17 来自：开发者社区

阿里云ECS体验 —— 构建kafka应用程序

# 大数据系统基础 — Kafka# 问题一：若kafka设置的副本级别为2，partition数为3，请阐述“Hello kafka”， “Hello world”， “kafka”三条信息的传输流程。根据题意，当前副本级别（replication）为2，partition数为3。其中parition 0 的leader为broker 1；parition 1的leader为broker 2；....

文章 2022-02-16 来自：开发者社区

Spring Cloud构建微服务架构（七）消息总线（续：Kafka）

Spring Cloud Bus除了支持RabbitMQ的自动化配置之外，还支持现在被广泛应用的Kafka。在本文中，我们将搭建一个Kafka的本地环境，并通过它来尝试使用Spring Cloud Bus对Kafka的支持，实现消息总线的功能。由于本文会以之前Rabbit的实现作为基础来修改，所以先阅读《Spring Cloud构建微服务架构（七）消息总线》有助于理解本文。 Kafka简介 Ka....