kafka单条消息过大导致线上OOM，运维连夜跑路了！
1 线上问题kafka生产者罢工，停止生产，生产者内存急剧升高，导致程序几次重启。查看日志，发现Pro程序爆异常kafka.common.MessageSizeTooLargeException。查看kafka配置，默认单条消息最大1M，当单条消息长度超过1M，就会出现发送到broker失败...
[帮助文档] 如何限制Kafka服务端运维流量
本文为您介绍如何在Kafka集群运维中对Kafka运维流量进行限制，以避免由于运维流量影响到正常的业务流量。本文以EMR Kafka 2.4.1版本为例。
[帮助文档] Kafka磁盘写满时如何运维操作
本文以EMR Kafka 2.4.1版本为例，介绍Kafka磁盘写满时的运维操作。
【大数据开发运维解决方案】Kylin消费Kafka数据流式构建cube
文章开始之前先说明环境情况，这里kylin消费的kafka数据是从Oracle 数据库用Ogg For Bigdata以json格式将数据投递到kafka topic的，投递的时候，关于insert和update 之前的数据投递到名为 ZTVOUCHER_INS 的topic，而delete和upd...
[帮助文档] 如何在EMRKafka2.4.1版本进行Kafka磁盘故障运维
磁盘故障及其运维通常伴随着磁盘上的数据销毁。在进行磁盘运维时，您应考虑数据是否需要迁移备份。对于Kafka集群，您还需要考虑Topic分区副本数据是否可以从其他Broker节点分区副本同步恢复。本文以EMR Kafka 2.4.1版本为例，介绍Kafka磁盘故障运维的操作。
【kafka运维】Leader重新选举运维脚本
作者：石臻臻, CSDN博客之星Top5、Kafka Contributor 、nacos Contributor、华为云 MVP ,腾讯云TVP, 滴滴Kafka技术专家 、 KnowStreaming PMC)。 KnowStreaming 是滴滴开源的Kafka运维管控平台, 有兴趣一起参与参...
【kafka 运维】 kafka-consumer-groups.sh 消费者组管理
作者：石臻臻, CSDN博客之星Top5、Kafka Contributor 、nacos Contributor、华为云 MVP ,腾讯云TVP, 滴滴Kafka技术专家 、 KnowStreaming PMC)。 KnowStreaming 是滴滴开源的Kafka运维管控平台, 有兴趣一起参与参...
【kafka运维】Topic的生产和消费运维脚本
作者：石臻臻, CSDN博客之星Top5、Kafka Contributor 、nacos Contributor、华为云 MVP ,腾讯云TVP, 滴滴Kafka技术专家 、 KnowStreaming PMC)。 KnowStreaming 是滴滴开源的Kafka运维管控平台, 有兴趣一起参与参...
【kafka运维】ConfigCommand运维脚本
日常运维 、问题排查 怎么能够少了滴滴开源的滴滴开源LogiKM一站式Kafka监控与管控平台1ConfigCommandConfig相关操作; 动态配置可以覆盖默认的静态配置;1 查询配置Topic配置查询展示关于Topic的动静态配置1.1.查询单个Topic配置(只列举动态配置)sh bin/...
更新时间 2023-05-08 09:07:40
本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。
社区圈子
