云消息队列 Kafka 版rocketmq 的相关内容

文章 2022-08-22 来自：开发者社区

EMQX 4.x 版本更新：Kafka 与 RocketMQ 集成安全增强

近日，EMQX 开源版 v4.3.17、v4.3.18、v4.4.6、v4.4.7，与企业版 v4.3.12、v4.3.13、v4.4.6、v4.4.7 八个维护版本正式发布。此次发布包含了多个功能更新：规则引擎 RocketMQ 支持 ACL 检查、Kafka 支持 SASL/SCRAM 与 SASL/GSSAPI 认证以适配更多部署方式，提升规则引擎 TDengine 写入性能以及 MQTT....

文章 2022-06-30 来自：开发者社区

常用消息队列 Kafka、RabbitMQ、RocketMQ、ActiveMQ 综合对比（18个方面）

一、简介Kafka：中。有kafka作者自己写的书，网上资料也有一些。rabbitmq：多。有一些不错的书，网上资料多。zeromq：少。没有专门写zeromq的书，网上的资料多是一些代码的实现和简单介绍rocketmq：少。没有专门写rocketmq的书，网上的资料良莠不齐，官方文档很简洁，但是对技术细节没有过多的描述。activemq：多。没有专门写activemq的书，网上资料多。二、开发....

文章 2022-05-30 来自：开发者社区

消息队列原理和选型：Kafka、RocketMQ 、RabbitMQ 和 ActiveMQ

常用的消息队列主要这 4 种，分别为 Kafka、RabbitMQ、RocketMQ 和 ActiveMQ，主要介绍前三，不BB，上思维导图！消息队列基础什么是消息队列？消息队列是在消息的传输过程中保存消息的容器，用于接收消息并以文件的方式存储，一个消息队列可以被一个也可以被多个消费者消费，包含以下 3 元素：Producer：消息生产者，负责产生和发送消息到 Broker；Broker：消息处....

文章 2022-05-13 来自：开发者社区

Kafka/RocketMQ 多线程消费时如何保证消费顺序？

上两篇文章都在讨论顺序消息的一些知识，看到有个读者的留言如下：这个问题问得非常棒，由于在之前的文章中并没有提及到，因此我在这篇文章中单独讲解，本文将从消费顺序性这个问题出发，深度剖析 Kafka/RocketMQ 消费线程模型。Kafkakafka 的消费类 KafkaConsumer 是非线程安全的，因此用户无法在多线程中共享一个 KafkaConsumer 实例，且 KafkaConsume....

文章 2022-05-13 来自：开发者社区

Kafka分区副本与RocketMQ队列的区别

最近在学习 Kafka，发现其核心概念与 RocketMQ 还是存在一定的差别，下面我来说下 Kafka 分区与 RocketMQ 队列之间的区别。RocketMQ 队列RocketMQ 每个主题都会有若干个队列，分布于集群中各个 broker 上，分布规律如下：队列会在 broker 中抽象成一个 consumer queue，在集群模式下，每个队列每个消费组只能存在一个消费者进行订阅消费，....

文章 2022-05-11 来自：开发者社区

消息队列之事务消息，RocketMQ 和 Kafka 是如何做的？（下）

就是来了波狸猫换太子，其实延时消息也是这么实现的，最终将换了皮的消息入盘。Broker 处理提交或者回滚消息的处理方法是 EndTransactionProcessor#processRequest，我们来看一看它做了什么操作。可以看到，如果是提交事务就是把皮再换回来写入真正的topic所属的队列中，供消费者消费，如果是回滚则是将半消息记录到一个 half_op 主题下，到时候后台服务扫描半消息....

文章 2022-05-11 来自：开发者社区

消息队列之事务消息，RocketMQ 和 Kafka 是如何做的？（上）

每个时代，都不会亏待会学习的人。大家好，我是 yes。今天我们来谈一谈消息队列的事务消息，一说起事务相信大家都不陌生，脑海里蹦出来的就是 ACID。通常我们理解的事务就是为了一些更新操作要么都成功，要么都失败，不会有中间状态的产生，而 ACID 是一个严格的事务实现的定义，不过在单体系统时候一般都不会严格的遵循 ACID 的约束来实现事务，更别说分布式系统了。分布式系统往往只能妥协到最终一致性，....

文章 2022-05-11 来自：开发者社区

消息队列之推还是拉，RocketMQ 和 Kafka 是如何做的？（下）

Kafka 中的长轮询像 Kafka 在拉请求中有参数，可以使得消费者请求在 “长轮询” 中阻塞等待。简单的说就是消费者去 Broker 拉消息，定义了一个超时时间，也就是说消费者去请求消息，如果有的话马上返回消息，如果没有的话消费者等着直到超时，然后再次发起拉消息请求。并且 Broker 也得配合，如果消费者请求过来，有消息肯定马上返回，没有消息那就建立一个延迟操作，等条件满足了再返回。我们来....

文章 2022-05-11 来自：开发者社区

消息队列之推还是拉，RocketMQ 和 Kafka 是如何做的？（上）

每个时代，都不会亏待会学习的人大家好，我是 yes。今天我们就来谈一谈消息队列的推拉模式，这也是一个面试热点，例如你在简历里面写了 RocketMQ ，基本上会问你 RocketMQ 采用的是推模式还是拉模式啊？是拉模式？不是有 PushConsumer 吗？今天我们就来谈谈推拉模式，并且再来看看 RocketMQ 和 Kafka 是如何做的。推拉模式首先明确一下推拉模式到底是在讨论消息队列的哪....

文章 2022-05-11 来自：开发者社区

Kafka和RocketMQ底层存储之那些你不知道的事（下）

RocketMQ 和 Kafka 的应用RocketMQ采用Topic混合追加方式，即一个 CommitLog 文件中会包含分给此 Broker 的所有消息，不论消息属于哪个 Topic 的哪个 Queue 。所以所有的消息过来都是顺序追加写入到 CommitLog 中，并且建立消息对应的 CosumerQueue ，然后消费者是通过 CosumerQueue 得到消息的真实物理地址再去 Com....