文章 2024-09-10 来自:开发者社区

Kafka的logs目录下的文件都是什么日志?

在Kafka的logs目录下,您通常会找到以下几种类型的日志文件: Broker日志:这些日志文件记录了Kafka broker的运行情况,包括启动、关闭、错误信息以及运行时的详细记录。这些日志通常用于调试和排查Kafka broker的问题。 Topic日志:这些日志文件是Kafka中最为核心的部分,它们存储了...

问答 2023-04-24 来自:开发者社区

想问下rocketmq能像kafka那样,直接通过在配置文件添加磁盘目录后,达到扩容的效果么,谢谢!

想问下rocketmq能像kafka那样,直接通过在配置文件添加磁盘目录后,达到扩容的效果么,谢谢!

问答 2022-02-15 来自:开发者社区

安装pipeline_kafka,make时报错Makefile:19: /usr/pgsql-11/lib/pgxs/src/makefiles/pgxs.mk: 没有那个文件或目录,找到lib下面,确实没有pgxs,只有pgxs.so请问怎么解决

安装pipeline_kafka,make时报错Makefile:19: /usr/pgsql-11/lib/pgxs/src/makefiles/pgxs.mk: 没有那个文件或目录,找到lib下面,确实没有pgxs,只有pgxs.so请问怎么解决

文章 2021-12-29 来自:开发者社区

【kafka源码】kafka跨目录数据迁移实现源码解析| 文末送书8本

如何跨目录迁移为什么线上Kafka机器各个磁盘间的占用不均匀,经常出现“一边倒”的情形? 这是因为Kafka只保证分区数量在各个磁盘上均匀分布,但它无法知晓每个分区实际占用空间,故很有可能出现某些分区消息数量巨大导致占用大量磁盘空间的情况。在1.1版本之前,用户对此毫无办法,因为1.1之前Kafka只支持分区数据...

【kafka源码】kafka跨目录数据迁移实现源码解析| 文末送书8本
问答 2021-12-12 来自:开发者社区

Kafka 新建的分区会在哪个目录下创建?

Kafka 新建的分区会在哪个目录下创建?

问答 2018-10-18 来自:开发者社区

大家好,业务场景是这样的,从kafka拉来的数据需要对原始日志进行备份,使用 BucketingSink bk=new BucketingSink("hdfs-path");写入HDFS,不同的文件写入不同的目录,有性能问题吗,每个新到的文件就新new一个BucketingSink,

转自钉钉群21789141:大家好,业务场景是这样的,从kafka拉来的数据需要对原始日志进行备份,使用BucketingSink bk=new BucketingSink("hdfs-path");写入HDFS,不同的文件写入不同的目录,有性能问题吗,每个新到的文件就新new一个BucketingSink

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

消息队列

消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。

+关注