云消息队列 Kafka 版学习的相关内容

文章 2022-11-12 来自：开发者社区

kafka学习之 Quickstart

第一步：安装启动kafka官网链接：https://www.apache.org/dyn/closer.cgi?path=/kafka/2.3.0/kafka_2.11-2.3.0.tgz进入指定目录：cd /usr创建文件夹：mkdir kafka进入目录：cd kafka下载：wget http://mirror.bit.edu.cn/apache/kafka/2.0.0/kafka_2.1....

文章 2022-11-12 来自：开发者社区

kafka学习之简介

kafka是一个分布式的流媒体平台，这意味着：类似消息队列，它可以发布订阅消息流用一个容错的持久化的方式存储消息流实时的处理消息流kakfa通常被用户下面两大类应用：构建一个能在系统跟应用之间可靠的传输数据的实时的流数据管道构建实时流应用程序，能够转换或响应数据流一些重要的概念：kafka作为一个集群运行在一个或多个服务器上，这些服务可以跨多个数据中心kafka集群将记录流存储在称为topics....

文章 2022-10-20 来自：开发者社区

基于mac构建大数据伪分布式学习环境（九）-部署Kafka

1.解压2.修改配置broker.id:单机不修改listeners:默认9092端口log.dirs：注意：这个目录不是存储日志的，是存储Kafka中核心数据的目录，这个目录默认是指向的tmp目录，所以建议修改一下zookeeper.connect：kafka依赖的zookeeper如果kafka和zookeeper在同一台机器上，并且zookeeper监听的端口就是那个默认的2181端口cd....

文章 2022-06-07 来自：开发者社区

学习方法｜一把解开Kafka背后机制的“钥匙”

在Kafka中有一个非常重要的角色：控制器，KafkaController，承担着Kafka核心运作机制，从本文开始将逐步深入Kafka内核，揭晓Kafka内部的运作机制，为更好的运维Kafka储备充足的弹药。深入探究Kafka内核，我们将如何展开呢？经过笔者初略的浏览了KafkaController类的源码，发现Kafka的控制器严重依赖Zookeeper集群，而基于Zookeeper编程的常....

文章 2022-04-25 来自：开发者社区

kafka 使用及学习过程中的爬坑记录

文章目录Producer factory does not support transactions异常原因解决方案Must set retries to non-zero when using the idempotent producer.解决方案Must set acks to all in order to use the idempotent producer. Otherwise w....

文章 2022-03-08 来自：开发者社区

KAFKA 源码学习：KAFKA Producer

1、导读笔者在生产交付的项目中使用了 KAFKA，为了更好地掌握 KAFKA，业余时间阅读了部分源码。KAFKA 生产者的代码中有很多的精妙绝伦的设计，非常值得借鉴学习。本文将探讨 KafkaProducer 的消息发送流程、高并发场景下消息的缓冲机制、缓冲机制是如何通过分段加锁和读写分离巧妙提升吞吐和并发的、为减少频繁 FGC ...

文章 2022-02-16 来自：开发者社区

kafka学习记录

消息系统 kafka：支持协议仿AMQP，动态扩容（支持zk），支持负载均衡、集群。（事物：多个全部提交，要么全部成功，要么全部失败。） AMQP：高级消息队列 advanced message queue protocol。三个组件： broker即...

文章 2022-02-16 来自：开发者社区

kafka学习记录

kafka集群搭建： 1、搭建 2、配置文件介绍软件环境：linux ，需要有zookeeper集群，版本选择0.8.1 ，kafka_源码包配置文件： server.properties &n...

文章 2021-12-29 来自：开发者社区

超强!!! Kafka高质量专栏学习大全,持续连载中

进滴滴技术答疑qun,跟众多技术专家交流技术运维Topic增删查(扩容) kafka-topics.shkafka的动态配置 kafka-config.shTopic发送消息 kafka-console-producer.shTopic消费消息 kafka-console-consumer.sh持续批量推送消息 kafka-verifiable-producer.sh持续批量拉取消息kafka-....