文章 2023-11-08 来自:开发者社区

淘东电商项目(50) -ELK+Kafka分布式日志收集(实现篇)

引言本文代码已提交至Github(版本号:da9e2df57a8650a18003bdbde1f24c3c4e21c8a4),有兴趣的同学可以下载来看看:https://github.com/ylw-github/taodong-shop前面已经把分布式日志收集(ELK+Kafka)的原理以及环境搭建成功了,有兴趣的同学可以参阅下:《淘东电商项目(48) -ELK+Kafka分布式日志收集(原理....

淘东电商项目(50) -ELK+Kafka分布式日志收集(实现篇)
文章 2023-11-08 来自:开发者社区

淘东电商项目(49) -ELK+Kafka分布式日志收集(docker下搭建kafka)

引言本文代码已提交至Github,有兴趣的同学可以下载来看看:https://github.com/ylw-github/taodong-shop在上一篇博客《淘东电商项目(48) -ELK+Kafka分布式日志收集(原理篇)》讲解了使用ELK+Kafka在分布式环境下收集日志的原理。之前已经搭建好了ELK了,在本文将讲解基于Dokcer搭建Kafka,当然,搭建Kafka环境之前,需要搭建Zo....

淘东电商项目(49) -ELK+Kafka分布式日志收集(docker下搭建kafka)
文章 2023-11-08 来自:开发者社区

淘东电商项目(48) -ELK+Kafka分布式日志收集(原理篇)

引言本文代码已提交至Github,有兴趣的同学可以下载来看看:https://github.com/ylw-github/taodong-shop在前面的博客,主要是讲解了在Docker下搭建ELK,以及实现搜索功能,有兴趣的同学可以看下:《淘东电商项目(38) -Docker下安装ES&Kibana(一次填完所有的坑)》《淘东电商项目(39) -商品搜索服务数据库设计》《淘东电商项目(....

淘东电商项目(48) -ELK+Kafka分布式日志收集(原理篇)
文章 2023-11-08 来自:开发者社区

分布式系列教程(42) -ELK配置与使用

引言在前面的博客中,我们知道在Linux下如何搭建ELK(ElasticSearch+Logstash+Kibana)以及它们的使用,如有兴趣的同学,可以参考下。安装教程:《分布式系列教程(27) -Linux环境下安装Elasticsearch》《分布式系列教程(37) -Linux下搭建ElasticSearch集群》《分布式系列教程(28) -Linux环境安装Kibana》《分布式系列教....

分布式系列教程(42) -ELK配置与使用
文章 2023-11-08 来自:开发者社区

分布式系列教程(39) -分布式日志采集系统ELK

引言在传统项目中,如果在生产环境中,有多台不同的服务器集群,如果生产环境需要通过日志定位项目的Bug的话,需要在每台节点上使用传统的命令方式查询,这样效率非常底下。通常,日志被分散在储存不同的设备上。如果你管理数十上百台服务器,你还在使用依次登录每台机器的传统方法查阅日志。这样是不是感觉很繁琐和效率低下。当务之急我们使用集中化的日志管理,例如:开源的syslog,将所有服务器上的日志收集汇总。集....

文章 2023-07-09 来自:开发者社区

分布式实战 | 第一篇 :ELK在开源全栈项目【有来商城】的应用,不仅仅是分布式日志收集(二)

五. SpringBoot整合ElasticSearch客户端RestHighLevelClient1. pom依赖代码坐标: common-elasticsearch#pom.xml客户端的版本需和服务器的版本对应,这里也就是7.10.1    org.elasticsearch.client    elasticsearch-rest-high-lev....

分布式实战 | 第一篇 :ELK在开源全栈项目【有来商城】的应用,不仅仅是分布式日志收集(二)
文章 2023-07-09 来自:开发者社区

分布式实战 | 第一篇 :ELK在开源全栈项目【有来商城】的应用,不仅仅是分布式日志收集(一)

一. 前言其实早前就想计划出这篇文章,但是最近主要精力在完善微服务、系统权限设计、微信小程序和管理前端的功能,不过好在有群里小伙伴的一起帮忙反馈问题,基础版的功能已经差不多,也在此谢过,希望今后大家还是能够相互学习,一起进步~OK,回正题,ELK是Elasticsearch、Logstash、Kibana三个开源软件的组合,相信很多童鞋使用ELK有去做过分布式日志收集。流程概括为:微服务应用把L....

分布式实战 | 第一篇 :ELK在开源全栈项目【有来商城】的应用,不仅仅是分布式日志收集(一)
文章 2023-01-08 来自:开发者社区

ELK分布式日志实时监控系统搭建实录(避坑指南)

前言:文本主要记录ELK搭建过程的主要步骤,使用组件:filebeat+logstash+elasticsearch+kibana。filebeat收集日志给到logstash(logstash也可以单独干这个活)elasticsearch可以说是个索引数据库也可以认为是搜索引擎,他主要负责数据的存储,这里就是日志信息了,kibana则是一个可视化的elasticsearch的操作工具。一、组件....

文章 2022-11-17 来自:开发者社区

ELK搭建(一):实现分布式微服务日志监控

1、目标本次我们搭建的目标是通过ELK来收集微服务中的日志。本期主要以实操、快速搭建为主进行讲解,部分基础概念不做过多描述,后续会再单独出几期博客说明。更多ELK搭建可以关注本专栏,后续会持续输出。2、思路首先我们要部署的架构如下图所示,需要收集两个微服务的日志,并且最终在kibana中可视化呈现出来。可以看出日志的传输路线是:微服务产生日志,并将日志数据保存到磁盘中的.log文件中,fileb....

ELK搭建(一):实现分布式微服务日志监控
文章 2022-08-28 来自:开发者社区

ELK分布式日志讲解

在最近的项目中,讨论到一些异常的处理,以及日志的输出。是的,这些看起来小的不能再小的事,发生了分歧。因为大家普遍只对 Log4j 了解,而对其余的却基本未曾使用。我们的 Leader 也表示对 ELK 这类大规模日志由于好久不使用,也有点生疏了。所以今天总结了一下关于日志的介绍。日志对于程序员是不可或缺的,在我们的开发过程中,写完代码需要调试的话,日志是必须的,日志可以帮助我们定位我们的问题,从....

ELK分布式日志讲解

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

检索分析服务 Elasticsearch版

阿里云检索分析服务Elasticsearch版兼容开源ELK功能,免运维全托管,提升企业数据检索与运维分析能力。

+关注