文章 2025-01-21 来自:开发者社区

金融场景 PB 级大规模日志平台:中信银行信用卡中心从 Elasticsearch 到 Apache Doris 的先进实践

导读:中信银行信用卡中心每日新增日志数据 140 亿条(80TB),全量归档日志量超 40PB,早期基于 Elasticsearch 构建的日志云平台,面临存储成本高、实时写入性能差、文本检索慢以及日志分析能力不足等问题。因此使用 Apache Doris 替换 Elasticsearch,实现资源投入降低 50%、查询速度提升 2~4 倍,同时显著提高了运维效率。 本文转录自陈地长(中信信用.....

金融场景 PB 级大规模日志平台:中信银行信用卡中心从 Elasticsearch 到 Apache Doris 的先进实践
文章 2024-10-18 来自:开发者社区

超越传统模型:从零开始构建高效的日志分析平台——基于Elasticsearch的实战指南

随着互联网应用和微服务架构的普及,系统产生的日志数据量日益增长。有效地收集、存储、检索和分析这些日志对于监控系统健康状态、快速定位问题以及优化性能至关重要。Elasticsearch 作为一种分布式的搜索和分析引擎,以其强大的全文检索能力和实时数据分析能力成为日志处理的理想选择。 本文将指导读者从零开始构建一个基于Elasticsearch的日志分析平台,...

超越传统模型:从零开始构建高效的日志分析平台——基于Elasticsearch的实战指南
文章 2024-09-25 来自:开发者社区

日志平台-ELK实操系列(一)

经典的ELK套件的架构图如下: 首先梳理下上面架构图当中每个组件的应用和原理: ①、最开始的可以说是日志接入层,会以多种方式的日志的采集和汇聚,日志采集有多种框架进行采集和汇聚比较主流的是filebeats。 对日志的采集和汇聚的框架分类: 入侵的:在微服务里面日志框架...

日志平台-ELK实操系列(一)
问答 2024-07-30 来自:开发者社区

如何在Serverless平台上实时查看Spring Boot应用的日志?

如何在Serverless平台上实时查看Spring Boot应用的日志?

问答 2024-07-23 来自:开发者社区

应用研发平台EMAS sdk的日志服务专门针对移动端是不是有特定优化?

应用研发平台EMAS sdk的日志服务专门针对移动端是不是有特定优化。因为emas sdk其他功能我们并不需要,如何日志功能方面没差异的话,我们可能选择独立日志sdk

问答 2024-07-23 来自:开发者社区

应用研发平台EMAS中日志下载为啥只下载一万行日志,怎么下载全部日志?

应用研发平台EMAS中日志下载为啥只下载一万行日志,怎么下载全部日志?

问答 2024-07-23 来自:开发者社区

应用研发平台EMAS中有日志的功能,它和独立日志sdk什么区别?

应用研发平台EMAS中有日志的功能,它和独立日志sdk什么区别? https://help.aliyun.com/zh/sls/developer-reference/overview-of-log-service-sdk-for-ios?spm=a2c4g.11186623.0.0.36727a4fUN8Gaj

问答 2024-07-23 来自:开发者社区

应用研发平台EMAS 移动推送回执日志FAQ

应用研发平台EMAS 移动推送回执日志FAQ

问答 2024-07-23 来自:开发者社区

应用研发平台EMAS vivo手机收不到离线通知,回执日志是已经到达,麻烦查下?

应用研发平台EMAS vivo手机收不到离线通知,回执日志是已经到达,麻烦看下是怎么回事?

问答 2024-07-23 来自:开发者社区

应用研发平台EMAS MPS:HuaWei 这个日志里在有些非华为手机上能获取token,有的为空?

应用研发平台EMAS MPS:HuaWei 这个日志里在有些非华为手机上能获取到token,但是有的手机token就为空,怎么回事?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

日志服务SLS

日志服务 (Simple Log Service,简称 SLS) 是云原生观测分析平台,为 Log/Metric/Trace 等数据提供大规模、低成本、实时平台化服务。一站式提供数据采集、加工、分析、告警可视化与投递功能,全面提升研发、运维、运营和安全等场景数字化能力。

+关注