通过Sidecar-CRD方式采集容器文本日志
Nginx错误日志所在文件的路径为/var/log/nginx/error.log，用于存储Nginx错误日志的目标Logstore为 nginx-error。配置示例如下：Sidecar示例 apiVersion:batch/v1 kind:Job metadata:name:nginx-log-sidecar-demo namespace:default spec:...
通过Sidecar-控制台方式采集容器文本日志
日志样例可协助您配置日志处理相关参数，降低配置难度。例如：[2023-10-01T10:30:01,000][INFO]java.lang.Exception:exception happened at TestPrintStackTrace.f(TestPrintStackTrace.java:3)at TestPrintStackTrace.g...
代码开发概述
部署代码包 日志 错误处理 函数实例生命周期回调方法 Java 环境说明 请求处理程序（Handler）上下文 编译部署代码包 日志 错误处理 函数实例生命周期回调方法 C#环境说明 请求处理程序（Handler）上下文 编译部署代码包 日志 错误处理 函数...
成本优化指南
构建目标Logstore1，用于存储操作日志与错误日志，存储30天并建立索引。构建目标logstore2，用于存储一般性日志，存储7天并建立索引。这种情况下您的成本约为 1672元/每月，与加工之前相比大约可以节省25%的成本。如果您的原始日志存储周期...
解析Java报错日志
需要逐步查找定位问题，并修改正则表达式，直到加工任务能够成功解析各个不同类型的错误日志。步骤三：分析错误日志数据 基于加工后的错误日志，可以进行错误日志数据分析。本文只对日志服务的Java错误日志做分析。在Project列表区域，单击...
如何查看Logtail采集错误信息
历史报错在过期前仍显示，您可以忽略这部分报错，仅确认在问题处理完毕的时间点之后是否有新的错误。其中Logtail上报错误信息的时间间隔为10分钟。说明 如果您需要查看解析失败而被丢弃的完整日志，可查看Logtail运行日志。路径为：主机...
常见问题
日志服务如何设置字段索引 如何修改SQL查询语句输出结果的行数 如何查询日志的来源机器和日志条目 如何精确的按照时间排序查询日志 如何将日志下载到本地 如何在日志中搜索包含空格的关键字 数据加工常见问题 错误排查概述 加工引擎启动...
使用前须知
功能优势 简单：一站式开通、中心化使用，无需关心日志收集、存储、计算、可视化等问题，将开发、运维人员从日志处理的繁琐耗时中解放出来，将更多的精力集中到业务开发和技术探索上去。海量：访问日志与CLB实例请求PV成正比，数据规模很大...
SDK参考概述
日志服务Java SDK：使用GetLogs接口查询日志 使用Java SDK管理日志库Logstore 通过消费组消费数据 使用Aliyun Log Java Producer写入日志数据 日志服务Python SDK：使用GetLogs接口查询日志 使用Python SDK管理日志库Logstore 使用...
错误处理
错误类型及处理原则 SDK可能出现的异常错误可以分成如下几类：由日志服务端返回的错误。这类错误由日志服务端返回并由SDK处理。关于这类错误的详细信息可以参见具体的API接口说明、API错误码。关于错误码的更多信息，请参见 错误码。由SDK...
使用前须知
错误日志：记录当前阿里云账号内所有Project内资源的创建、修改、更新、删除以及数据读写的错误日志，存储在指定Project下名为internal-error_log的Logstore中。监控指标：记录Project粒度、Logstore粒度的流量、请求、延迟等指标数据，...
错误排查概述
错误日志查看方式 错误日志可以通过如下方式查看。通过日志库 internal-etl-log 查看。加工任务产生的日志会存储在日志库 internal-etl-log 中，该Logstore在执行数据加工任务后由系统自动生成。internal-etl-log 属于专属Logstore，不收取...
从OSS获取数据出错
res_oss_file(endpoint,ak_id=res_local("AK_ID"),ak_key=res_local("AK_KEY"),bucket,'test/test.dat',format='text',change_detect_interval=20))错误日志 message:Exception:{'status':404,'x-oss-request-id':'5D49*878','details':{'...
常见问题和错误排查
本文介绍日志服务所提供的Elasticsearch兼容接口的常见问题和错误排查方法。重要 本文档为阿里云原创文档，知识产权归阿里云所有，由于本文档旨在介绍阿里云与第三方产品交互的服务能力，因此可能会提及第三方公司或产品等名称。常见问题 Q...
采集-多渠道数据
为不同数据源产生的日志创建日志库，例如：wechat-server（存储微信服务器访问日志）wechat-app（存储微信服务器应用日志）wechat-error（错误日志）alipay-server alipay-app deliver-app（送货员App状态）deliver-error（错误日志）web-...
日志服务采集数据常见的错误类型
如果您遇到其他问题，请提交 工单 处理。错误类型 错误说明 解决方法 LOG_GROUP_WAIT_TOO_LONG_ALARM 数据包从产生到发送的过程中等待的时间较长。检查发送是否正常，或者是否存在数据量超过默认配置、配额不足或者网络存在问题。LOGFILE_...
为OSS投递任务（新版）设置告警
参数 说明 任务运行日志 打开 任务运行日志 开关后，系统将在您指定的Project中自动创建一个名为internal-diagnostic_log的Logstore，用于存储定时SQL、MaxCompute投递、OSS投递、数据导入等任务的运行日志与错误日志。日志字段说明，请...
Logtail
性能 限制项 限制说明 日志处理吞吐能力 原始日志流量默认限制为20 MB/s（数据被编码压缩后上传，一般压缩率为5~10倍）。超过该日志流量则有可能丢失日志，您可启动参数 max_bytes_per_sec 进行调整。具体操作，请参见 设置Logtail启动参数...
Logtail限制说明
性能 限制项 限制说明 日志处理吞吐能力 原始日志流量默认限制为20 MB/s（数据被编码压缩后上传，一般压缩率为5~10倍）。超过该日志流量则有可能丢失日志，您可启动参数 max_bytes_per_sec 进行调整。具体操作，请参见 设置Logtail启动参数...
为MaxCompute投递任务（新版）设置告警
参数 说明 任务运行日志 打开 任务运行日志 开关后，系统将在您指定的Project中自动创建一个名为internal-diagnostic_log的Logstore，用于存储定时SQL、MaxCompute投递、OSS投递、数据导入等任务的运行日志与错误日志。日志字段说明，请...
Logtail发布历史
修复原生插件丢弃超时日志时区处理错误的问题 修复解析任意含有content key的JSON后，原生JSON插件总是错误保留原始content字段的问题 修复原生分隔符插件的内存泄露问题 修复因检查点转储早于目录注册导致的日志重复问题 修复飞天日志无法...
服务器迁移中问题
本文介绍服务器迁移相关的故障问题及解决方案。日志报错提示子账号权限不足Forbidden.SubUser，怎么办？日志报错提示Forbidden.Unauthorized错误，怎么办？日志报错提示Your Account Haven't Completed Real-name Authentication错误，...
通过Unity Plugin接入数据
ReportLuaError 上报Lua脚本错误日志。ReportCSharpError 上报C#错误日志。常见问题 1.如何通过STS方式获取访问凭证信息，并动态更新到SDK？通过STS方式获取访问凭证信息，可以有效避免AccessKey固定写在代码中，从而避免造成数据泄露。...
投递CDN实时日志到SLS来分析用户访问数据
日志分析 CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只...
常见问题及错误排查
本文介绍日志审计服务的常见问题及错误排查。常见错误排查 错误类型 错误信息 错误原因 解决方法 账号配置 LogException{httpCode=-1 errorCode='IllegalResourceDirectoryAccounts' errorMessage='IllegalResourceDirectoryAccounts:...
查看错误日志
您可以通过控制台查看实例的错误日志。前提条件 实例类型为副本集实例或分片集群实例。重要 单节点实例可以在副本集实例列表中找到，但是不支持查看错误日志信息。注意事项 您只能查看7天内的错误日志。操作步骤 登录 MongoDB管理控制台。...
基础信息
本文介绍使用 函数计算 编写代码相关的基础概念信息，包括请求处理程序、函数实例生命周期回调方法、日志记录和错误处理等。请求处理程序 在创建函数时，您需要指定请求处理程序。函数计算 的运行时会加载并调用您的请求处理程序处理请求。...
开启控制平面日志和日志告警功能
本文介绍如何在服务网格ASM控制台中配置控制平面日志采集和告警，将日志推送到日志服务的LogStore中进行存储、查询分析并配置日志告警。前提条件 阿里云账号已开通阿里云日志服务SLS。具体操作，请参见 开通日志服务。重要 将日志采集到ASM...
采集标准Docker容器日志
如果Logtail日志（/usr/local/ilogtail/ilogtail.LOG）中出现 The parameter is invalid:uuid=none 的错误日志，请在宿主机上创建一个 product_uuid 文件，在其中输入任意合法UUID（例如 169E98C9-ABC0-4A92-B1D2-AA6239C0D261），并把该...
新功能发布记录
2022-11-21 全部地域 接入Kubernetes JVM监控数据 接入Kubernetes数据面监控数据 Kubernetes数据面监控基于 日志服务 与龙蜥社区合作共建的无侵入监控能力，您可以直观地分析整个Kubernetes的数据流向与瓶颈问题，轻松应对复杂的云原生环境...
Flutter SDK快速入门
本文介绍如何快速使用日志服务Flutter SDK采集日志数据。前提条件 已安装日志服务Flutter SDK。具体操作，请参见 安装Flutter SDK。初始化 SDK 一般场景下，您可以参考以下代码进行初始化。若您需要配置 LogProducerConfiguration 类，例如...
投递CDN实时日志到SLS来分析用户访问数据
日志分析 CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只...
投递CDN实时日志到SLS来分析用户访问数据最佳实践
日志分析 CDN实时日志打通了SLS日志服务的日志转存和日志分析能力，预制了CDN基础数据、CDN错误分析、CDN热门资源、CDN用户分析这四张常用分析报表，也支持自定义日志分析策略，可以一站式提供日志存储和日志分析能力，而离线日志目前只...
阿里云日志服务Splunk Add-on
本文介绍如何通过阿里云日志服务Splunk Add-on将日志服务上的日志投递到Splunk。架构 Splunk Add-on架构：通过Splunk Data Input创建日志服务消费组，并从日志服务进行实时日志消费。将采集到的日志通过Splunk私有协议（Private Protocol）...
投递日志到MaxCompute（旧版）
重试任务 针对内部错误，日志服务支持按照策略自动重试。其他情况下，请您手动重试。自动重试的最小间隔是30分钟。当任务失败后，等待30分钟再做重试。日志服务支持重试最近2天内所有失败的任务。如果您需要立即重试失败任务，请单击 重试...
使用前须知
功能优势 简单：一站式开通、中心化使用，无需关心日志收集、存储、计算、可视化等问题，将开发、运维人员从日志处理的繁琐耗时中解放出来，将更多的精力集中到业务开发和技术探索。海量：访问日志与ALB实例请求PV成正比，数据规模很大，...
导入Elasticsearch数据
错误处理机制 错误项 说明 与Elasticsearch集群通信异常 导入任务采用Scroll模式拉取Elasticsearch数据，默认使用的keep-alive时长为24小时。遇到网络连接错误或其他无法与Elasticsearch服务正常通信的错误（例如用户认证错误）时，导入...
什么是Logtail
Logtail是日志服务提供的日志采集Agent，用于采集阿里云ECS、自建IDC、其他云厂商等服务器上的日志。本文介绍Logtail的功能、优势、使用限制及配置流程等信息。Logtail多年来一直承载着阿里巴巴集团重要服务的数据采集。每天采集数百万...
监控、诊断和故障排除
例如，在某些情况下，用户请求可能会报告一个错误，而服务器端日志中却看不到任何该请求的访问情况，这时就可以使用OSS的日志服务功能记录的日志来调查该问题的原因是否出在客户端上，或者使用网络监视工具来调查网络问题。最常用的网络...
工作原理
错误日志会发送到您的internal-etl-log下，您可以检查下配置并重新发起。调度执行完成后，系统会根据实际执行情况变更实例状态为成功或失败。使用建议 建议您在使用智能巡检时，根据业务情况，明确具体的监控项，从而进行高效的数据转化与...
- 产品推荐
- 这些文档可能帮助您