云消息队列 Kafka 版方案的相关内容

文章 2023-10-09 来自：开发者社区

多云与混合云场景下的数据同步方案-KAFKA

1 企业业务系统部署架构的变化趋势-多云与混合云现阶段，企业信息系统部署架构（DA: Deploy architecture）的一大变化是，越来越多的企业在不断将越来越多的应用部署到云上，即***业务系统上云的趋势愈演愈烈***。不过企业业务系统上云不是一蹴而就的，也不是单向的一帆风顺的。这里涉及到新开发的业务系统的主动上云（由于是采用云原生技术栈新开发的业务系统，其上云相对顺畅些），也包括....

文章 2022-11-18 来自：开发者社区

【kafka】kafka的服务复用与隔离设计方案

作者：石臻臻, CSDN博客之星Top5、Kafka Contributor 、nacos Contributor、华为云 MVP ,腾讯云TVP, 滴滴Kafka技术专家、KnowStreaming。KnowStreaming 是滴滴开源的Kafka运维管控平台, 有兴趣一起参与参与开发的同学,但是怕自己能力不够的同学,可以联系我,当你导师带你参与开源！。这篇文章主要讲一下 &am...

文章 2022-11-10 来自：开发者社区

【kafka思考】最小成本的扩缩容副本设计方案

作者：石臻臻, CSDN博客之星Top5、Kafka Contributor 、nacos Contributor、华为云 MVP ,腾讯云TVP, 滴滴Kafka技术专家、KnowStreaming PMC)。KnowStreaming 是滴滴开源的Kafka运维管控平台, 有兴趣一起参与参与开发的同学,但是怕自己能力不够的同学,可以联系我,带你一起你参与开源！。该文章可能已过期....

文章 2022-08-14 来自：开发者社区

【kafka】kafka的服务复用与隔离设计方案

这篇文章主要讲一下 kafka的服务复用与隔离; 主要解决的问题是,在多个迭代环境下; 让消息的提供者和消费者都能正确的发出和消费; 这个比dubbo的服务路由与隔离更复杂一点1.问题描述概念说明:稳定版本: ABC 属于全局共用的一套稳定服务;迭代版本: A1 C1 C2 属于他们对应系统的迭代版本, 比如针对A系统进行需求改动,部署一套新的迭代服务A1;要求: mq提供者服务提供....

问答 2022-08-03 来自：开发者社区

cdc抽取mysql整个实例的binlog，有没有方案通过配置的方式将这些库表拆开分发到kafka

问答 2022-07-13 来自：开发者社区

现有两个kafka的topic要通过Flink将数据原封不动的写入MYSQL 王方案一: 写两个F

现有两个kafka的topic要通过Flink将数据原封不动的写入MYSQL 王方案一: 写两个Flink的脚本运行两个任务分别写入方案二:只写一个Flink脚本运行一任务但这个Flink脚本中有两个insert语句大佬觉得选择哪一种方案比较好？

文章 2022-01-24 来自：开发者社区

Kafka无消息丢失配置方案

一、kafka消息丢失的原因kafka以其高性能、高吞吐、可扩展等出色能力，被广泛应用在各行各业，是事件流处理平台和消息队列中的佼佼者，但是经常可以看到有人在吐槽kafka消息丢失，但是真的是kafka的锅吗，本文我们就来认真分析一下到底哪些场景可能导致消息丢失以及使用怎么样的方案可以防止消息丢失。我们知道使用kafka设计到三大模块，kafka producer、kafka broker和ka....

问答 2022-01-19 来自：开发者社区

Debezium+Kafka+Flink SQL+存储系统方案有什么好处？

问答 2022-01-19 来自：开发者社区

Debezium+Kafka+计算程序+存储系统这种方案有什么难度？

文章 2021-12-31 来自：开发者社区

【kafka思考】最小成本的扩缩容副本设计方案

在这篇文章开始前,你需要先了解【kafka源码】kafka分区副本的分配规则从【kafka源码】kafka分区副本的分配规则中我们已经知道了,如何分区副本是如何进行分配的那么当我们想要批量进行副本扩缩的时候, 如果按照之前 --generate的重新计算分配方式来做的话, 那么这个数据迁移量是非常大的; 很有可能大部分的副本都有变动(牵一发而动全身)那么我们有没有什么方式能够尽量减少这种变动....