如何调整PolarDB MySQL的Redo日志文件的大小和数量
概述 阿里云云原生关系型数据库PolarDB MySQL引擎的Redo日志文件占用大量磁盘空间，需要进行清理。本文主要介绍如何通过 loose_innodb_polar_log_file_max_reuse 参数减少日志空间占用量。详细信息 Redo日志通常在2GB~11GB左右，最多时会...
功能特性
DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件存储上的所有数据（包括静态存储和动态传输中的...
一般性问题
1.数据库文件存储DBFS是什么，适合什么场景？数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于：OLTP及OLAP数据库场景：例如，MySQL、PostgreSQL等。NoSQL数据库场景：例如，MongoDB、RocksDB等。2...
复制和分发数据
日志服务支持对每一个源Logstore...执行结果 打开target-a项目，在 日志存储>日志库 页签中选择logstore-a日志库，您可以看到分发过来的数据。打开target-b项目，在 日志存储>日志库 页签中选择logstore-b日志库，您可以看到分发过来的数据。
查看快照容量
根据快照链查看快照容量 快照链是一个数据库文件系统中所有快照组成的关系链，一个文件系统对应一条快照链。快照链的更多信息，请参见 快照链。说明 快照链的容量计算有几分钟延迟，因此该数据仅供参考，实际发生费用请以云盘快照账单为准...
应用总览
自定义配置中可以使用自己设定的日志文件，要求日志文件中必须有：数据库、SQL、耗时、事务ID。Flow Limit-flowlimit 流量监控指标。消息发布-msgpub 消息发布监控指标。消息订阅-msgsub 消息订阅监控指标。JVM 监控-jvmgc JVM 监控指标。...
数据模型
日志库（Logstore）日志库是日志服务中日志数据的收集、存储和消费单元。每个日志库隶属于一个项目，每个项目可以创建多个日志库。您可以根据实际需求为某一个项目生成多个日志库，其中常见的做法是为一个应用中的每类日志创建一个独立的...
什么是日志服务
日志服务SLS是云原生观测与分析平台，为Log、Metric、Trace等数据...立即开通日志服务 扩展阅读 SLS不仅能进行日志查询与分析，还能观测告警、数据库审计、数据加工与处理、实现商业分析、用户画像分析……看看达人们是怎么玩的吧。直达实战派
RDS空间组成说明
日志文件空间：这是数据库运行过程中产生的空间；更新事务越多，空间占用就越大。不过RDS已经进行优化，会尽可能快的将日志存储到OSS，以防空间占满而锁定。RDS SQL Server磁盘空间 RDS Server的磁盘空间包含如下：数据空间：用户数据所...
API概览
本产品（数据库文件存储/2020-04-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
产品架构
更多信息，请参见 什么是日志服务告警。消费与投递：日志服务支持数据实时消费，适用于Storm消费、Flume消费、Flink消费等场景；支持数据实时投递，适用于将数据投递至OSS、TSDB等云产品。更多信息，请参见 投递概述 和 消费概述。日志审计...
映射富化函数
field String、String List或Tuple List 是 日志中映射到表格的源字段。如果日志中不存在对应字段，则不进行任何操作。output_fields String、String List或Tuple List 是 映射后的字段。例如["province","pop"]。missing String 否 无匹配...
应用总览
自定义配置中可以使用自己设定的日志文件，要求日志文件中必须有：数据库、SQL、耗时、事务 ID。Flow Limit-flowlimit 流量监控指标。消息发布-msgpub 消息发布监控指标。消息订阅-msgsub 消息订阅监控指标。JVM 监控-jvmgc JVM 监控指标。...
服务指标
自定义配置中可以使用自己设定的日志文件，要求日志文件中必须有：数据库、SQL、耗时、事务 ID。flowlimit 限流 次 框架配置日志。文件采集路径/home/admin/logs/{app}/guardian/guardian-limit-stat.log。msgpub 消息推送 次 框架配置日志...
Data Explorer案例
示例4 在RDS数据库审计日志中，统计执行频率Top 10的SQL语句及其执行次数，并统计每个SQL语句同比昨天的执行次数的变化情况。Data Explorer配置 查询和分析语句|select"sql",diff[1]as current_value,diff[2]as previous_value,(diff[1]-...
使用前须知
日志服务通用数据库审计应用支持通过抓包方式将数据库的操作记录和操作行为上传到日志服务。您可以基于日志服务的存储、查询分析、可视化和告警等一站式功能，完成对数据库的审计。本文介绍通用数据库审计应用的使用场景、资产、费用等信息...
应用监控指标
DAL 数据库访问 次 应用日志（自定义日志文件）配置于 Dal 数据库访问。PV 耗时 页面浏览耗时 ms 应用日志（自定义日志文件）配置于 PV 页面访问量。Service 耗时 应用服务被外部调用的耗时 ms 应用日志（自定义日志文件）配置于 Service ...
Logtail采集日志失败的排查思路
如果文件中的日志需要被采集多份，请参见 如何实现文件中的日志被采集多份。确认Logtail采集配置是否已应用到机器组。在 机器组配置 页面，查看是否已将Logtail采集配置应用到机器组。更多信息，请参见 管理机器组。如果未应用到机器组，请...
日志聚合多维指标智能巡检
源日志库 当 日志库类型 设置为 日志库 时，需设置 源日志库，设置为您的源数据所在的日志库。时序库 当 日志库类型 设置为 时序库 时，需设置 时序库，设置为您的源数据所在的时序库。角色 如果您在创建实例时已完成了授权，则此处自动...
日志管理
日志库（Logstore）是日志服务中的日志存储和查询的基本单元，通常用于存储一类日志数据。目前，支持在控制台或者通过API完成对日志库的增删改查操作。日志库创建完成后，用户通过API或SDK向指定日志库写入日志数据。如果用户希望收集阿里...
云监控消费
云监控可以直接消费Logstore中日志数据，提供日志监控功能。通过将日志服务与云监控结合，形成了轻量级、全面、易用的日志监控解决方案。简单、易用，相比传统ELK方案，零编码即可享有完整监控解决方案。提供日志数据实时分析、监控图表...
Apache模式解析
Apache日志简介 Apache服务器会根据Apache日志配置文件中指定的日志打印格式、日志文件路径和名称输出Apache日志。例如 CustomLog"/var/log/apache2/access_log"combined，表示日志打印时使用combined格式，日志文件路径为/var/log/apache2...
开启或关闭日志服务
按量付费实例 警告 关闭日志服务，将导致日志服务自动创建的WAF专属日志库（Logstore）以及日志库中记录的日志数据被清除。请确认不再使用日志服务后，再进行该操作。登录 Web应用防火墙3.0控制台。在顶部菜单栏，选择WAF实例的资源组和...
通过SQL聚合指标数据进行智能巡检
源日志库 当 日志库类型 设置为 日志库 时，需设置 源日志库，设置为您的源数据所在的日志库。时序库 当 日志库类型 设置为 时序库 时，需设置 时序库，设置为您的源数据所在的时序库。角色 如果您在创建实例时已完成了授权，则此处自动...
日志库
日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。命名规则 只能包含小写字母、数字、连字符（-）和下划线（_）。必须以小写字母或者数字开头和结尾。长度为3~63字符。完整资源示例 {"logstoreName":"access_log","ttl":1,...
API简介
日志库 Logstore 日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。每个Logstore隶属于一个Project，每个Project中可创建多个Logstore。分区 Shard 日志服务使用Shard控制Logstore或MetricStore的读写数据的能力，数据必定...
管理MetricStore
基本概念 时序库（MetricStore）是日志服务中时序数据的采集、存储和查询单元。每个MetricStore隶属于一个Project，每个Project中可创建多个MetricStore。更多信息，请参见 时序库（MetricStore）。前提条件 已创建Project。具体操作，请...
云产品日志概述
云安全中心 安全日志 漏洞日志 基线日志 安全告警日志 云平台配置检查日志 网络日志 DNS解析日志 本地DNS日志 网络会话日志 Web访问日志 主机日志 进程启动日志 网络连接日志 登录流水日志 暴力破解日志 进程快照日志 账号快照日志 端口...
查看文件日志
您可以通过给日志文件名称添加通配符的方式滚动日志。文件名称通配符支持星号（*）和问号?查看文件日志时，在 SLS控制台 无数据展示，如何处理？通常SLS默认查询最近15分钟内的查询结果。如果SLS无数据显示，建议使用Webshell查看您的应用...
使用前须知
日志服务和数据库Redis联合推出日志审计功能，将日志服务的部分功能融合到Redis的审计日志、慢日志、运行日志中，实现日志实时查询、可视化分析、告警、投递、加工等功能。本文介绍Redis日志相关的资源说明、费用说明及使用限制。资源说明 ...
日志库（Logstore）
日志库（Logstore）是日志服务中日志数据的采集、存储和查询单元。日志服务提供标准型（Standard）和查询型（Query）两种类型的Logstore。标准型Logstore：支持日志服务一站式数据分析功能，适用于实时监控、交互式分析以及构建完整的可...
算法说明
日志服务异常智能分析应用提供文本分析功能，用于对日志中的文本日志进行智能化、自动化的分析，提供全局的统计分析结果。文本分析功能通过 日志模板发现 和 日志模板匹配 两个子任务，实现对于日志数据的监控和统计。您可以根据待分析的...
使用前须知
阿里云日志服务联合数据库MongoDB推出日志审计功能，将日志服务的部分功能融合到自身的审计日志、慢日志、运行日志中，实现日志实时查询、可视化分析、告警等功能。本文介绍MongoDB日志相关的资源说明、应用场景、费用说明及使用限制。资源...
使用数据实验室
在 首页 页面中，单击 数据库审计日志 中的 初始化。调整日志字段值、时间范围等配置。在 日志字段 页签中，包括字段名称、字段数据类型、字段随机参数和字段值等信息，您可以根据需求，调整字段随机参数和字段值。在 范围频率 页签中，可...
云数据库RDS
owner_id 阿里云账号ID region RDS实例所在地域 instance_name RDS实例名 instance_id RDS实例ID db_type 数据库类型 db_version 数据库引擎版本 check_rows 扫描的行数 db 数据库名 fail SQL执行是否出错。其中，0表示成功，除0之外的其他...
迁移RDS SQL Server数据到本地SQL Server
您可在目标数据库的 属性>文件 中可以查看到数据文件和日志文件的地址。执行完成后，数据库 testdb 将显示 正在还原 状态。说明 如果只需恢复全量备份数据，请直接跳至步骤7。如果还需要恢复增量备份数据，请执行步骤6。将数据库从增量备份...
简介
协同消费库 协同消费库（Consumer Library）是日志服务中对日志进行消费的高级模式，提供了消费组的概念对消费端进行抽象和管理，和直接使用SDK进行数据读取的区别在于，用户无需关心日志服务的实现细节，只需要专注于业务逻辑，另外，消费...
查询审计日志
开通 云数据库Redis版 审计日志后，您可以在审计日志中查询数据写入、修改与删除的记录，也可以进行故障排查或 Redis 实例资源消耗突增等性能分析。前提条件 已开通审计日志，详情请参见 开通审计日志。背景信息 当您需要查看数据库请求...
导入MySQL数据
您可以将自建MySQL数据库或RDS MySQL数据库中的数据导入到日志服务，实现数据的查询分析、加工等操作。本文介绍导入MySQL数据的操作步骤。使用限制 目前仅支持：华东1（杭州）、华东2（上海）、华北1（青岛）、华北2（北京）、华北3...
使用前须知
阿里云日志服务联合数据管理DMS推出操作日志导出功能，将日志服务的部分功能融合到DMS操作日志中，实现日志实时查询、可视化分析、告警等功能。本文介绍DMS操作日志导出功能相关的资源说明、应用场景、费用说明及使用限制。支持的日志 数据...
- 产品推荐
- 这些文档可能帮助您