阿里云文档 2025-03-05

数据安全中心日志存储超量治理说明

尊敬的阿里云用户:数据安全中心于2023年04月20日发布了存储管理模块(请参见【通知】发布存储管理模块及调整相关计费)。针对目前在使用该产品且存在日志存储超量情况的用户,自2025年04月01日起,将依据实际采购的规格实施存储限制。请合理安排日志的存储及压缩归档空间,以避免日志被清空或无法存储的情...

阿里云文档 2024-12-27

日志存储SDK合规使用指南

为确保开发者在使用日志服务(SLS)SDK时符合用户个人信息保护的要求,避免因第三方SDK的使用而侵害最终用户的个人信息权益,特制定本合规使用说明。该指南旨在帮助开发者在接入服务时进行自查和合理配置,以满足监管合规要求。

高性能

SelectDB 实现日志高效存储与实时分析

企业级日志数据具有数据量巨大、写入和查询速度快、结构多样的特点,本方案基于阿里云云数据库 SelectDB 版构建高性能、低成本、分析能力强大的日志存储与分析解决方案,覆盖运维监控、安全审计、业务分析等场景,并通过智能索引与分级存储实现数据亚秒级检索。
技术解决方案背景图
阿里云文档 2024-12-05

【产品变更】可观测监控 Prometheus 创建SLS MetricStore以存储用量数据

为了便于查询可观测监控 Prometheus 版的用量数据,满足用户自定义统计需求,自2024年11月25日起,可观测监控 Prometheus 版将逐步针对用户的 Prometheus 用量数据创建对应的 SLS MetricStore 以存储数据,存储时长为180天。该 SLS MetricStore 默认存储、索引、读写流量、读写次数免费,如果您使用了其他功能将按照 SLS 计费项进行收费。...

阿里云文档 2024-12-05

【产品变更】可观测监控 Prometheus 创建SLS MetricStore以存储用量数据

为了便于查询可观测监控 Prometheus 版的用量数据,满足用户自定义统计需求,自2024年11月25日起,可观测监控 Prometheus 版将逐步针对用户的 Prometheus 用量数据创建对应的 SLS MetricStore 以存储数据,存储时长为180天。该 SLS MetricStore 默认存储、索引、读写流量、读写次数免费,如果您使用了其他功能将按照 SLS 计费项进行收费。...

文章 2024-10-14 来自:开发者社区

大数据-69 Kafka 高级特性 物理存储 实机查看分析 日志存储一篇详解

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(正在更新…) ...

大数据-69 Kafka 高级特性 物理存储 实机查看分析 日志存储一篇详解
文章 2024-10-14 来自:开发者社区

大数据-68 Kafka 高级特性 物理存储 日志存储概述

点一下关注吧!!!非常感谢!!持续更新!!!目前已经更新到了:Hadoop(已更完)HDFS(已更完)MapReduce(已更完)Hive(已更完)Flume&...

大数据-68 Kafka 高级特性 物理存储 日志存储概述
文章 2024-10-10 来自:开发者社区

如何监控和优化 WAL 日志文件的存储空间使用?

监控和优化 WAL 日志文件的存储空间使用是 HBase 管理的重要部分。以下是一些策略: 监控 WAL 文件的大小和数量:定期检查 WAL 日志文件的大小和数量,以确保它们在合理的范围内。如果 WAL 文件变得过大或数量过多,可能会影响性能和存储空间的使用。 配置 WAL 相关参数: hbase.wal.provider&#...

文章 2024-09-23 来自:开发者社区

支持配置审计日志的存储数据库

背景介绍 审计日志用于监控和记录平台中用户特定的操作行为: 企业往往需要根据Dataphin的日志对用户行为进行审计,包括查看是否存在高危事件、针对某一个事件进行溯源等; 同时在“等保三级”的认证中,审计日志的存储时长也是必要的考察项目之一。 截止到Dataphin V4.2版本,平台的审计日志存储在部署机器中,需要用户自行准备采集软件并进...

支持配置审计日志的存储数据库
文章 2024-09-03 来自:开发者社区

通过日志聚合将作业日志存储在HDFS中

作者:尹正杰版权声明:原创作品,谢绝转载!否则将追究法律责任。 一.启用日志聚合功能   在默认情况下,Hadoop将所有日志存储在运行作业任务的节点上。在特定时间段后应用程序日志会被自动删除。可以配置日志聚合功能,将日志存储在HDFS中来长久保留日志信息。   日志聚合意味着一旦作业完成,Hadoop会自动聚合运行作业任务的所有节点的作业日志,并将它们移动到HDFS。日志记录是一个与YA...

通过日志聚合将作业日志存储在HDFS中

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

日志服务SLS

日志服务 (Simple Log Service,简称 SLS) 是云原生观测分析平台,为 Log/Metric/Trace 等数据提供大规模、低成本、实时平台化服务。一站式提供数据采集、加工、分析、告警可视化与投递功能,全面提升研发、运维、运营和安全等场景数字化能力。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等