阿里云文档 2025-11-19

将PolarDB PostgreSQL版(兼容Oracle)同步到Kafka

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将PolarDB PostgreSQL版(兼容Oracle)集群的数据同步至阿里云消息队列Kafka版。

阿里云文档 2024-11-27

使用Cluster Linking复制Kafka集群数据

Cluster Linking是Confluent Platform提供的一种功能,用于将多个Kafka集群连接在一起。该功能允许不同的Kafka集群之间进行数据的镜像和复制。Cluster Linking将在数据目标(Destination)集群启动,并复制数据源(Source)集群的数据到目标集群。本文将向您介绍如何使用云消息队列 Confluent 版的Cluster Linking。主要包...

阿里云文档 2024-09-20

基于eRDMA部署高网络性能的Kafka集群

基于支持eRDMA能力的ECS实例部署Kafka集群,可以充分利用eRDMA提供的低延迟、高吞吐量以及低CPU占用等特性,以优化Kafka集群内部节点间的数据传输效率,适用于对消息吞吐量和时延要求较高的应用场景。本文介绍如何基于支持eRDMA能力的ECS实例部署Kafka集群,并测试eRDMA对Kafka性能的提升效果。

阿里云文档 2024-06-13

Confluent集群迁移教程

当您需要把Topic从一个Confluent集群迁移至另一个集群时,阿里云提供两种迁移方案:迁移操作和数据迁移。迁移操作适用于消息保留较少的场景,操作简单;数据迁移使用ClusterLink做数据迁移,由阿里云技术支持提供远程协助,适用于数据重要,消息保留时间长、需要将数据迁移到新的集群上的场景。

阿里云文档 2024-03-18

Confluent集群网络访问与安全设置

本文介绍如何进行云消息队列 Confluent 版集群的网络访问与安全设置。

文章 2024-03-14 来自:开发者社区

Kafka【环境搭建 02】kafka_2.11-2.4.1 基于 zookeeper 搭建高可用伪集群(一台服务器实现三个节点的 Kafka 集群)

我使用的安装文件是 kafka_2.11-2.4.1.tgz ,以下内容均以此版本进行说明。zookeeper集群也是伪集群,zk的伪集群搭建方法可参考《Zookeeper-3.6.0 伪集群版 搭建指南》。 1 安装kafka 之前有单机版的铺垫《kafka_2.11-2.4.1 单机版安装指南》,这里省略部分说直接开装,也可参考官网《k...

文章 2023-10-08 来自:开发者社区

服务搭建篇(六) 搭建基于Kafka + Zookeeper的集群

一.Zookeeper1.什么是ZookeeperZooKeeper 是一个开源的分布式协调框架,是Apache Hadoop 的一个子项目,主要用来解决分布式集群中应用系统的一致性问题。Zookeeper 的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来,构成一个高效可靠的原语集,并以一系列简单易用的接口提供给用户使用。官方:https://zookeeper.apache.org/....

服务搭建篇(六) 搭建基于Kafka + Zookeeper的集群
文章 2022-11-12 来自:开发者社区

【采坑-Flink消费kafka中的数据】阿里云ECS/VMware之zookeeper和kafka单机/集群环境

一、环境1.centos7.62.zookeeper-3.4.53.kafka_2.11-0.10.2.14.jdk1.8_261二、单机-ECS-zookeepertar -zxvf zookeeper-3.4.5 -C /root/apps/cp zoo_simple.cfg zoo.cfg提前创建好数据和目录日志文件夹dataDir=/root/data/zookeeperdataLogD....

【采坑-Flink消费kafka中的数据】阿里云ECS/VMware之zookeeper和kafka单机/集群环境
文章 2021-11-14 来自:开发者社区

我个人的kafka broker和zookeeper集群实践(★firecat推荐★)

kafka是通过zookeeper来管理集群。 kafka软件包内虽然包括了一个简版的zookeeper,但是简易版功能有限。在生产环境下,建议还是直接下载官方zookeeper软件。 http://zookeeper.apache.org/http://mirror.bit.edu.cn/apache/zookeeper/建议使用稳定版,/stable/zookeeper-3.4.10.tar....

文章 2018-01-01 来自:开发者社区

kafka 、 zookeeper 集群(二)

一、zookeeper集群安装 要求: zookeeper的 jdk 要 6以上  zookeeper生产环境版本为 3.4.8 1.首先编辑/etc/hosts 在5台都加入: 10.0.50.10 zk-kafka01 10.0.50.11 zk-kafka02 10.0.50.12 zk-kafka03 10.0.50.13 zk-kafka04 10.0.50.14 zk-kaf...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

消息队列

消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。

+关注