最佳实践
时序存储 使用Prometheus采集Kubernetes监控数据 查询与分析 查询和分析网站日志 查询和分析JSON日志 Data Explorer案例 关联Logstore与MySQL数据库进行查询分析 关联Logstore与OSS外表进行查询和分析 查询MNS日志 采集及分析Nginx监控日志...
分析网站日志
本文介绍如何在日志服务控制台上分析网站日志，并通过合适的统计图表可视化展示分析结果。前提条件 已采集网站日志。具体操作，请参见 数据采集。已创建索引。具体操作，请参见 创建索引。背景信息 网站日志是网站运维的重要信息，包含PV、...
采集Node.js日志
背景信息 log4js是一个Node.js日志管理工具，您可以通过log4js把Node.js日志打印到文件中，并自定义日志格式，便于日志采集和整理。log4js分为6个输出级别，从低到高分别为trace、debug、info、warn、error、fatal。log4js配置示例如下所示...
查询和分析JSON日志
本文以查询和分析JSON类型的网站日志为例，为您介绍查询和分析JSON日志的步骤，并提供SQL语句示例。前提条件 已采集JSON日志。具体操作，请参见 使用极简模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标...
创建索引
倒排索引是一种数据存储结构，由关键词...查询和分析的示例，请参见 查询和分析网站日志、查询和分析JSON日志、采集及分析Nginx监控日志、分析负载均衡7层访问日志。设置字段的最大长度 分析时，日志服务默认支持的字段值最大长度为2048字节，...
日志字段详情
目前友盟实时日志订阅功能支持U-App（App日志）、U-MiniProgram（小程序日志）和U-Web（网站日志）三类数据，本文介绍这三类日志的字段详情。U-App日志 U-App日志记录用户启动App、使用App功能和App发生异常的相关数据。字段 说明 app_key ...
查询和分析日志
创建索引后，您可以在查询和分析页面对采集到的日志进行实时查询和分析。前提条件 已 创建索引。...相关文档 查询与分析常见问题 时间字段转换示例 查询和分析网站日志 查询和分析JSON日志 分析Nginx访问日志 分析负载均衡7层访问日志
Node.js SDK快速入门
本文介绍如何快速使用日志服务Node.js SDK完成常见操作，包括创建项目（Project）、创建日志库（Logstore）、写入日志和查询日志等。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_...
查询和分析网站日志
本文以查询和分析网站日志为例，帮助您快速上手查询和分析操作。前提条件 已采集到网站访问日志。具体操作，请参见 使用完整正则模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>...
查询语法
日志服务提供一套查询语法，用于指定日志查询时的过滤规则，从而筛选日志中满足条件的记录，筛选结果可以用于分析语句，进行更复杂的分析处理。查询语法 重要 日志服务查询语句和分析语句（SELECT语句）以竖线（|）分割。基础语法：查询...
提取字符串动态键值对
r"\b(\w+)eat([^\|]+)",{r"\1":r"\2 by \1"})加工结果 处理后日志为：content:rats eat rice|chicks eat bugs|kittens eat fish|kittens:fish by kittens chicks:bugs by chicks rats:rice by rats 客户案例 例如某网站日志中有一个URL数据...
Node.js SDK概述
日志服务Node.js SDK封装了日志服务大部分主要的API接口。您可以通过日志服务Node.js SDK方便地调用日志服务大部分主要的API接口。版本说明 更多信息，请参见 Aliyun Log Node.js Release。示例代码 日志服务Node.js SDK提供丰富的示例代码...
使用前须知
阿里云DDoS高防（新BGP）、DDoS高防（国际）联合日志服务推出全量日志分析功能，提供网站访问日志、CC攻击日志的实时采集、查询、分析、加工、消费等一站式服务，帮助您排查网站访问异常、追踪CC攻击者来源、分析网站运营情况等。...
快速使用WAF日志服务
Web应用防火墙（Web Application Firewall，简称WAF）日志服务通过阿里云日志服务实时地采集已接入WAF防护的网站业务的全量日志，并对采集到的日志数据进行查询与分析，以丰富的仪表盘形式展示查询结果，满足等保合规要求和网站业务的防护...
日志（Log）
日志服务采用半结构化的数据模式定义一条日志，包含日志主题、日志时间、日志内容、日志来源和日志标签五个数据域。日志服务对各个数据域的格式要求不同，详细说明如下表所示。数据域 说明 格式 日志主题 日志服务保留字段（_topic_）用于...
使用前须知
阿里云Web应用防火墙（WAF）联合日志服务推出WAF日志服务功能，提供网站域名访问日志、攻击防护日志的实时采集、查询、分析、加工、消费等一站式服务，满足等保合规要求和您的网站业务防护和运营需求。本文介绍WAF日志服务功能相关的资产...
快速设置日志告警
网站日志告警监控规则 检查频率 根据您配置的频率对查询和分析结果进行检查。固定间隔：按照固定间隔检查查询和分析结果。Cron：通过Cron表达式指定时间间隔，按照该指定的时间间隔检查查询和分析结果。Cron表达式的最小精度为分钟，24小时...
使用前须知
Web应用防火墙（WAF）的日志服务功能帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，提供查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和...
使用数据实验室
日志服务数据实验室为您提供各种场景的模拟日志数据及各种公共数据集数据，便于您熟悉日志服务的查询分析、查看报表等各种操作。本文介绍如何使用阿里云数据实验室。前提条件 已开通日志服务。首次登录 日志服务控制台 时，根据页面提示...
使用前须知
功能优势 等保合规：支持存储六个月的网站访问日志，助力网站符合等保合规要求。配置简单：轻松配置即可实时采集互联网流量日志。实时分析：依托 日志服务，提供实时日志分析能力、开箱即用的报表中心，让您对经过云防火墙的互联网流量以及...
使用前须知
阿里云日志服务和DDoS高防联合推出全量日志功能，提供网站访问日志、CC攻击日志的实时采集、查询、分析、加工、消费等一站式服务，帮您排查网站访问异常、追踪CC攻击者来源、分析网站运营情况等。本文介绍全量日志功能相关的资产详情、费用...
常见问题
存储与分析：存储与分析基础设施日志、应用日志、网站访问日志、容器日志、云产品日志、时序数据和链路数据等。智能运维：提供智能聚类、异常检测和异常预测能力。告警监控：监控应用业务、用户体验等数据，具备可视化分析与告警能力。问题...
Data Explorer案例
Data Explorer配置 查询语句 SLS and request_time(status>=200 and status)分析示例 示例1 在网站访问日志中，统计过去一天内网站请求的每小时平均耗时以及随时间的变化情况。Data Explorer配置 查询和分析语句|select date_trunc('hour',...
数据加工快速入门
本文以网站访问日志为例，为您介绍完整的数据加工流程，帮助您快速熟悉数据加工功能及其操作。前提条件 已创建名为web-project的Project。具体操作，请参见 创建Project。在Project（web-project）中创建名为website_log的源Logstore。具体...
计费案例
少于100万次 免费 案例2 A网站的访问日志平均为200 Byte/条，1天共1亿条日志，即每天日志量约为18.6 GB。目前A网站通过日志服务（Shard数量为2个，保存时间为3天）分析网站运营情况。假设本案例中的上传压缩率为20%且不计免费额度。1天的...
通过Data Explorer构建查询和分析语句
日志服务提供Data Explorer功能，帮助您简单、快速地构建查询和分析语句，无需编写SQL语句。前提条件 已创建索引。具体操作，请参见 创建索引。功能入口 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页...
安装Node.js SDK
注意事项 日志服务Node.js SDK基于JavaScript开发，暂不支持TS（TypeScript）。安装SDK 创建项目目录，并进入该目录。执行以下命令初始化。npm init 按照向导提示进行配置。初始化完成后，会自动创建一个 package.json 文件。其文件内容...
日志管理概述
Web应用防火墙（WAF）日志服务帮助您采集并存储WAF防护对象（云产品实例、域名）的Web访问及攻击防护日志，并基于阿里云日志服务，输出查询分析、统计图表、报警服务、下游计算对接与投递等能力，帮助您专注于分析，远离琐碎的查询和整理...
SDK参考概述
日志服务Java SDK：使用GetLogs接口查询日志 使用Java SDK管理日志库Logstore 通过消费组消费数据 使用Aliyun Log Java Producer写入日志数据 日志服务Python SDK：使用GetLogs接口查询日志 使用Python SDK管理日志库Logstore 使用...
Egg 集成部署
appid:您的应用 id，在 Node.js 性能平台 控制台中应用的 设置 页面获取 secret:您的应用 secret，在 Node.js 性能平台 控制台中应用的 设置 页面获取 logdir:您使用 Node.js 性能平台提供的 runtime 运行 Node.js 项目生成的日志存放地点...
开通日志功能
本文介绍如何在函数计算控制台中开启日志功能，将函数调用日志投递到日志服务。前提条件 已创建服务。具体操作，请参见 创建服务。配置日志功能 使用函数计算控制台配置日志 前提条件 函数计算 创建服务 可选：日志服务SLS 创建日志项目和...
SDK采集
开发人员可以使用.NET、.NET Core、Java、Python、PHP、Node.js、C、GO、IOS、Android、C++等语言的SDK采集、查询和分析日志等。使用前须知 不同语言的日志服务SDK具体实现细节会有所不同，但是它们都是日志服务API在不同语言上的封装，...
配置日志采集
本文介绍如何在EDAS控制台中配置日志采集功能，将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志采集到日志服务进行查询分析。前提条件 已创建ACK集群。具体操作，请参见 创建Kubernetes托管版集群、创建...
新功能发布记录
本文介绍日志服务每次发布涉及的功能变更及对应的文档，帮助您了解日志服务的发布动态。2024年3月 功能名称 功能描述 支持地域 相关文档 字段分析 SLS（Simple Log Service）具备字段分析功能，专注于对text、long和double类型字段的统计...
数据采集概述
数据来源 日志服务支持的数据来源如下：类别 来源 接入方式 更多 应用 程序输出 Logtail 查询分析程序日志 访问日志 Logtail 分析Nginx访问日志 链路跟踪 Trace服务 Logtail 无 时序数据 Logtail Telegraf 无 语言 Java Log Service Java ...
自定义分析数据
背景信息 ARMS RUM已内置前端监控实时大屏、页面访问速度、会话追踪、JS错误诊断、API请求、API详情等仪表盘，帮助您快速完成前端性能分析、错误定位等。但在真实的用户场景中，内置仪表盘不能完全满足用户需求。针对此需求，ARMS RUM和...
展开JSON字段
配置示例如下：原始日志"s_key":"{\"k1\":{\"k2\":{\"k3\":{\"k4\":{\"k51\":\"51\",\"k52\":\"52\"},\"k41\":\"41\"}}})"Logtail插件处理配置 处理结果"js_key-k1-k2-k3-k4-k51":"51""js_key-k1-k2-k3-k4-k52":"52""js_key-k1-k2-k3-k41":...
采集-IoT/嵌入式日志
Web Tracking（JS）：类似百度统计，Analytics轻量级采集方式，无需签名。日志服务团队结合IoT设备的特点，为IoT设备量身定制一套日志数据采集方案：C Producer。C Producer特点 C Producer Library继承Logtail稳定、高性能、低资源消耗等...
映射富化函数
原始日志 data:123 city:nj pop:800 加工规则 e_table_map(tab_parse_csv("city,pop,province nj,800,js sh,2000,sh"),["city","pop"],"province",)加工结果 data:123 city:nj pop:800 province:js 示例8：多个日志匹配字段，且日志匹配...
自定义函数开发指南
函数开发 您可以通过Java、Python、Node.js等多种语言实现函数开发，日志服务提供了相应Runtime的SDK，以便您在函数中进行集成，详情请参见 SDK参考。以下内容以Java 8 Runtime为例，介绍如何开发日志服务ETL函数。关于Java 8函数编程细节...
- 产品推荐
- 这些文档可能帮助您