阿里云文档 2025-09-10

使用日志管理查询和分析消息操作日志

您可以使用云消息队列 Confluent 版的日志管理功能将云消息队列 Confluent 版实例的消息操作日志推送到日志服务。您可通过开通该服务,查询客户端的所有请求日志。

文章 2025-05-14 来自:开发者社区

直播预告|Kafka+Flink 双引擎实战:手把手带你搭建分布式实时分析平台!

在数字化转型浪潮中,企业正面临前所未有的挑战:如何在海量数据洪流中快速捕捉价值?如何将实时决策能力转化为业务增长的加速器? 5 月 15 日(周四)19:00-21:00,阿里云消息队列 Kafka 版与实时计算 Flink 版的强强联合,三位阿里云技术专家联袂开讲,为企业提供了一套从数据采集到智能分析的解决方案——零门槛构建分布式实时分析平台,让数据真正"活"起来! ...

直播预告|Kafka+Flink 双引擎实战:手把手带你搭建分布式实时分析平台!
文章 2025-05-08 来自:开发者社区

直播预告|Kafka+Flink双引擎实战:手把手带你搭建分布式实时分析平台!

在数字化转型浪潮中,企业正面临前所未有的挑战:如何在海量数据洪流中快速捕捉价值?如何将实时决策能力转化为业务增长的加速器? 5 月 15 日(周四)19:00-21:00,阿里云消息队列 Kafka 版与实时计算 Flink 版的强强联合,三位阿里云技术专家联袂开讲,为企业提供了一套从数据采集到智能分析的解决方案——零门槛构建分布式实时分析平台,让数据真正"活"起来! 流处理与实时计算:企业提升....

直播预告|Kafka+Flink双引擎实战:手把手带你搭建分布式实时分析平台!
文章 2024-07-03 来自:开发者社区

基于Kafka的nginx日志收集分析与监控平台(3)

基于Kafka的nginx日志收集分析与监控平台(2)+https://developer.aliyun.com/article/1557848 过半机制 在领导者选举的过程中,如果某台zkServer获得了超过半数的选票,则以zkServer就可以成为Lerder了。 过半机制的源码实现是通过下面操作: ...

基于Kafka的nginx日志收集分析与监控平台(3)
文章 2024-07-03 来自:开发者社区

基于Kafka的nginx日志收集分析与监控平台(2)

基于Kafka的nginx日志收集分析与监控平台(1)+https://developer.aliyun.com/article/1557847 4、为什么选择filebeat? 日志采集器有很多,比如Logstash,虽然Logstash的功能强大,但是它依赖java并且在数据量大的时候进程会消耗过多的系统资源,会严重影响业务系统的性能。 而filebeat就是一个完美...

基于Kafka的nginx日志收集分析与监控平台(2)
文章 2024-07-03 来自:开发者社区

基于Kafka的nginx日志收集分析与监控平台(1)

1、项目环境 搭建此次项目的主要用到的技术软件:centos7(三台)、nginx 、kafka、zookeeper 、mysql、celery、filebeat 、python。 2、项目描述 项目主要是关于使用filebeat作为生产者收集前端nginx集群中用户访问nginx web页面时产生的access日志,然后将收集到的日志信息统一存入kafka平台,然后编写...

基于Kafka的nginx日志收集分析与监控平台(1)
文章 2022-02-17 来自:开发者社区

搞懂分布式技术24:基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台:

0背景介绍 随着机器个数的增加、各种服务、各种组件的扩容、开发人员的递增,日志的运维问题是日渐尖锐。通常,日志都是存储在服务运行的本地机器上,使用脚本来管理,一般非压缩日志保留最近三天,压缩保留最近1个月,其它直接删除或迁移到日志服务器上。 运维会将这些日志mount到远程的日志服务器上,然后开发人员使用运维分配的账号登陆堡垒机器跳转到日志服务器上查看不同项目不同机器的日志。 下图是日志服务器某....

搞懂分布式技术24:基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台:

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

消息队列

消息队列是构建分布式互联网应用的基础设施,通过消息队列实现的松耦合架构设计可以提高系统可用性以及可扩展性,是适用于现代应用的优秀设计方案。

+关注