ECS集群应用日志清理机制是什么
本文介绍关于在EDAS中部署应用时，生成的日志清理机制的常见问题。在EDAS中部署的应用的日志是否会被定期清理？仅满足以下条件，EDAS的定时任务脚本才会定期清理 Ali-Tomcat 目录下的日志：在ECS集群环境下部署的应用。应用的运行环境是...
数据加密
数据加密机制 日志服务支持如下两种加密类型机制：通过日志服务自带的服务密钥加密 日志服务为每个Logstore生成独立的数据加密密钥，用于数据加密。该加密密钥永不过期。支持的数据加密算法为AES算法（默认）和国密算法SM4。通过用户自带...
概述
工作机制 日志服务基于Telegraf开发的监控模板，支持将Telegraf采集的监控数据（MySQL监控数据、Redis监控数据、Elasticsearch监控数据等）通过InfluxDB协议写入Logtail，Logtail再将监控数据上传到日志服务MetricStore中。针对常用插件，...
日历重置机制
日志服务全局默认日历支持重置，用于修改日期的默认属性（节假日、工作时间段等）。例如2021年3月10日~2021年3月12日为公司A的团建日，则公司工作人员可在全局默认日历中将这3天重置为节假日。重置日历后，可基于该日历进行告警通知。重置...
渠道分派与发送机制
本文介绍渠道的分派与发送机制。渠道分派 通知（行动）管理系统接收到告警集合后，根据告警属性，将告警集合分派给不同的渠道。示例1：严重级别的告警通过钉钉通知；其他级别的告警，通过邮件通知。示例2：标签为 sensitive=p1 的告警，...
什么是Logtail
Logtail是日志服务提供的日志采集Agent，用于采集阿里云ECS、自建IDC、其他云厂商等服务器上的日志。本文介绍Logtail的功能、优势、使用限制及配置流程等信息。Logtail多年来一直承载着阿里巴巴集团重要服务的数据采集。每天采集数百万...
日志应用
同步机制依赖日志服务数据加工。资源限制 中心主账号下对应的中心化Project只有一个，名为slsaudit-center-中心化主账号ID-配置的地域，例如：slsaudit-center-117938634953*-cn-beijing。无法通过控制台删除中心化Project，只能通过命令行...
使用前须知
同步机制依赖日志服务数据加工。资源限制 中心主账号下对应的中心化Project只有一个，名为slsaudit-center-中心化主账号ID-配置的地域，例如：slsaudit-center-117938634953*-cn-beijing。无法通过控制台删除中心化Project，只能通过命令行...
告警静默机制
本文介绍告警静默机制的基本原理。若告警策略已配置静默规则，那么所有使用该告警策略的告警都会受该静默规则影响。如下三个场景有助于您理解静默规则的生效原理。静默规则在发送告警通知之前生效 在发送告警通知之前，告警管理根据当前...
动态行动策略机制
机制说明 如果您在创建告警策略时，设置 行动策略 为 动态行动策略，则表示日志服务进行告警通知时，以您在配置告警监控规则时指定的行动策略为准。如果您在创建告警策略时，设置 行动策略 为动态行动策略之外的其他选项，则表示日志服务...
合并集合去重机制
更多信息，请参见 动态行动策略机制。首次等待、变化等待和重复等待 告警合并后，行动（通知）管理系统将统一发送告警通知。但由于合并集合内的告警并不是同时产生的，因此日志服务提供了首次等待时间（group_wait）、变化等待时间（group_...
数据加密
服务器端加密 日志服务支持如下两种加密类型机制：通过日志服务自带的服务密钥加密 日志服务为每个Logstore生成独立的数据加密密钥，用于数据加密。该加密密钥永不过期。支持的数据加密算法为AES算法（默认）和国密算法SM4。通过用户自带...
创建日志告警监控规则
创建日志告警监控规则后，日志服务根据您定义的检查频率、触发条件等配置产生告警，并根据您所选择的告警策略和行动策略进行告警降噪和通知。前提条件 已采集数据。支持采集 日志、时序数据。重要 基于查询和分析语句创建告警监控规则前，...
设置告警
日志服务已内置 CloudLens for CLB 告警监控规则，您只需添加对应的告警规则即可实时监控CLB实例，并可通过钉钉等渠道接收到告警通知。本文介绍设置告警的相关操作。背景信息 CloudLens for CLB 预设了基线告警、同环比告警、智能告警等告...
数据可靠性
日志服务采用三副本机制为您提供高可靠性。日志服务底层存储采用三副本机制来保证数据的可靠性，即每份数据都有3个副本，副本按照一定的分布式存储算法保存在集群中的不同机器。通过该机制，存储系统确保3个数据副本分布在不同服务器的不同...
Logtail
当被inotify机制监控的目录数达到上限时，将使用常规机制对剩余目录进行监控，不影响日志采集。您可以通过提高Logtail采集配置监控目录的精度或调整启动参数 default_max_inotify_watch_num 来提高inotify的监控上限。关于 default_max_...
Logtail限制说明
当被inotify机制监控的目录数达到上限时，将使用常规机制对剩余目录进行监控，不影响日志采集。您可以通过提高Logtail采集配置监控目录的精度或调整启动参数 default_max_inotify_watch_num 来提高inotify的监控上限。关于 default_max_...
Logtail发布历史
本文介绍日志服务Logtail的发布历史。1.8.7 发布时间：2024.03.05 新功能 Logtail-ds组件在ACK场景下支持资源组配置。拓展插件新增 processor_rate_limit 插件。修复 修复Logtail使用历史数据采集之后进程无法优雅退出的问题。1.8.6 发布...
采集客户端数据的高可用方案
背景 在单集群环境下，日志服务存储采用三副本机制来保证数据的可靠性，即每份数据都有3个副本，副本按照一定的分布式存储算法保存在集群的不同机器中。通过该机制，存储系统确保3个数据副本分布在不同服务器的不同物理磁盘上，单个硬件...
概述
数据可靠性 日志服务底层存储采用三副本机制，提供高可靠性。日志服务监控审计 日志服务提供服务日志功能，并支持云监控，满足您对企业数据的监控审计需求。云产品日志审计 日志服务提供日志审计功能，针对云产品提供多账号下实时自动化、...
日志服务与Elasticsearch的兼容性
日志服务所提供的Elasticsearch兼容接口，其兼容机制是将Elasticsearch DSL查询翻译为日志服务的索引查询和SQL分析查询，并且按照Elasticsearch的API格式规范返回查询分析结果，从而实现Elasticsearch查询协议的兼容。说明 日志服务的...
Logtail配置
Logtail配置是Logtail采集日志的策略集合。通过在创建Logtail配置时设置数据源、采集模式等参数，实现定制化的采集策略。本文介绍API模式下Logtail配置相关的参数说明。Logtail配置基础参数说明 参数名称 数据类型 是否必填 示例值 描述 ...
RAM授权
授权完成后，日志服务有权限扮演角色（STS机制）对OSS Bucket进行写入操作。概述 不同场景下，配置投递任务所需完成的RAM授权。如果您需要对OSS Bucket进行更细粒度的访问控制，请参见 修改授权策略。如果日志服务Project和OSS Bucket不在...
日志采集Agent对比
日志采集场景下客户端测评 DT时代，数以亿万计的服务器、移动终端、网络设备每天产生海量的日志。...Logtail占用机器CPU/内存资源最少，性能吞吐量较好，针对常用日志场景支持全面，但缺少插件等机制，灵活性和可扩展性不如以上两个客户端。
通知渠道说明
其它：消息中心、事件总线、函数计算 短信 设置告警通知渠道为短信，则触发告警后，日志服务会向指定的用户、用户组或值班组发送短信通知。注意事项 使用短信告警通知时，发送通知的号码是随机的，无法提供固定号码。前提条件 已创建用户、...
加工原理
日志服务提供的数据加工功能，通过编排内置的两百多个函数，使用协同消费组对日志数据进行消费，实现对日志数据的加工处理。本文档主要介绍进行数据加工时日志数据的调度原理，以及加工规则引擎的工作原理。调度原理 日志服务的数据加工...
对接DataV
实时计算（流计算）：固定的计算+变化的数据 离线计算（数据仓库+离线计算）：变化的计算+固定的数据 在对实时性有要求的日志分析场景中，日志服务为您提供实时索引LogHub中数据机制，可通过LogSearch/Analytics直接进行查询分析。...
阿里云日志服务Splunk Add-on
机制 一个Data Input相当于一个消费者，对日志进行消费。一个消费组由多个消费者构成，同一个消费组下面的消费者共同消费一个Logstore中的数据，消费者之间不会重复消费数据。一个Logstore下面会有多个Shard。每个Shard只会分配到一个消费...
SDK参考概述
日志服务Java SDK：使用GetLogs接口查询日志 使用Java SDK管理日志库Logstore 通过消费组消费数据 使用Aliyun Log Java Producer写入日志数据 日志服务Python SDK：使用GetLogs接口查询日志 使用Python SDK管理日志库Logstore 使用...
常见问题
本文列举了日志服务告警功能相关的一些常见问题，帮助您快速了解日志服务告警功能。一般常见问题 日志服务告警能做什么？日志服务告警是日志服务提供的一站式智能运维告警系统。用于监控日志服务中的日志和时序数据，及时发现异常并触发告...
查看全局数据
日志量整体趋势、产品日志量趋势 过去30天的日志量趋势 当天的统计有一小时延迟 OSS全局数据 仪表盘 描述 总日志量、小时日志量、天日志量 OSS日志全局统计 访问日志总日志量、小时日志量、天日志量 访问日志统计 计量日志总日志量、小时...
算法说明
文本分析中的算法采用LogParser和异常检测技术，提供日志分析报表帮助您了解日志的全局信息和可能存在的异常情况，包括：通过日志报表快速定位可能出现异常的日志类别（例如新出现的日志类别，异常分数Top5的日志类别等），缩小人工排查的...
SDK采集
使用前须知 不同语言的日志服务SDK具体实现细节会有所不同，但是它们都是日志服务API在不同语言上的封装，实现的功能也基本一致。具体包括如下几个方面：实现对日志服务API接口的统一封装，让您不需要关心具体的API请求构建和响应解析。...
管理日志存储空间
开通DDoS高防全量日志服务后，您可以根据需要修改日志存储容量的规格，或清空已存储的全部日志。背景信息 如果您因网站业务调整，导致所需要的日志存储容量发生变化，您可以通过 升级 增加日志存储容量、通过 降配 减小日志存储容量。例如...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
开启或关闭日志服务
Web应用防火墙（Web Application Firewall，简称WAF）默认关闭日志服务功能。如果您需要存储防护对象的日志数据，并对日志数据进行查询与分析，您需要先开启WAF日志服务。如果您不再需要使用日志服务，您可以降配日志存储容量（包年包月...
过滤日志
您在使用Logtail采集日志时，您可以使用processor_filter_regex插件或processor_filter_key_regex插件过滤日志。本文介绍各个插件的参数说明和配置示例。重要 表单配置方式：采集文本日志和容器标准输出时可用。JSON配置方式：采集文本日志...
日志索引表
云产品分类 CloudLens应用 日志类型 存储 CloudLens for SLS 重要日志（消费组延迟日志、Logtail告警日志、Logtail采集日志、Logtail状态日志）详细日志 任务运行日志（定时SQL任务运行日志、数据导入、投递等任务的运行日志）错误日志 ...
日志设置与日志容量管理
开通日志服务后，您可以根据业务防护及分析需要，设置日志字段和存储类型，开启或关闭防护对象日志采集功能，修改日志存储时长，更有效地利用日志容量。您也可以实时查看日志容量，及时升级容量，避免日志数据无法写入专属日志库。本文介绍...
日志（Log）
日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同，详细说明如下表所示。数据域 说明 格式 日志主题 日志服务保留字段（_topic_）用于...
- 产品推荐
- 这些文档可能帮助您