基本原理
将数据变更事件通知给所有 SessionServer，事件内容是：id：版本号信息：<version>SessionServer 接收到变更事件通知后，对比 SessionServer 内存中存储的 dataInfoId 的 version，发现比 DataServer 发过来的小，所以主动向 DataServer ...
PolarDB Serverless实现了哪些突破
并且因为内存和存储中的状态与数据库节点解耦，使用Serverless架构的 PolarDB 节点的崩溃恢复时间比使用单机架构的 PolarDB 内核快5.3倍。在 PolarDB Serverless架构下，我们对数据库性能进行了测试，最终的测试结果也远超预期。这些结果也...
如何将一棵LSM-Tree塞进NVM
鉴于DRAM是掉电易失的，其采用写前日志（WAL）的方式将要写入的数据提前写入到磁盘中持久化，在内存中的数据刷入（flush）或者合并到磁盘后再清除对应的WAL。在典型的设计中，内存中的数据通常采用跳表（skiplist）实现，在大小超过限制后...
上传本地内存
本文档介绍如何将本地内存中的内容上传到OSS。示例代码 以下代码用于将本地内存中的内容上传到OSS。const OSS=require('ali-oss');const client=new OSS({/yourregion填写Bucket所在地域。以华东1（杭州）为例，Region填写为oss-...
JVM监控内存详情说明
堆内存详情 堆（Heap）部分是Java内存中的核心部分，所有对象都在这里分配内存，是垃圾收集的主要区域。根据Java垃圾收集器的不同，ARMS展示的最大允许使用堆内存有可能会略小于用户设置的堆内存上限。例如在ParallelGC垃圾收集器中，设置-...
新建数据模型
内存实体 不存储在数据库中，仅临时存储在应用程序内存中的实体。系统默认实体 系统默认实体里面既含有实体，也有内存实体。系统默认实体实际上是引用模块的实体，系统数据模块是应用的默认引用模块。操作步骤 登录 魔笔。在顶部菜单栏选择...
配置使用持久内存
镜像：Alibaba Cloud Linux 2 CentOS 7.6及更高版本 Ubuntu 18.04、Ubuntu 20.04 背景信息 持久内存的访问速度比普通内存慢，但在停机或重启后，持久内存中的数据不会丢失。持久内存的使用方式包括：作为内存使用：您可以将部分原本存放在...
查询文件系统详情
回收站存储量（标准/低频）：表示开启回收站后，通用型NAS中被删除的文件或目录暂存在回收站中的存储量。在文件系统详情页面查看 在文件系统列表页面，单击目标文件系统，进入该文件系统的详情页面，在 基本信息 页签查看指定文件系统存储...
文件系统存储类型
费用说明 NAS将根据您的数据在文件系统各存储类型中的存储容量、时长收取一定的存储费用。同时，如果您还对存储在低频存储或归档存储中的数据进行访问，则会收取相应的读写流量费用。详细信息，请参见 通用型NAS计费。
MySQL 实际内存分配情况介绍
MyISAM 表不同于 InnoDB 表，其缓存的索引缓存是放在 key_buffer 中的，而数据缓存则存储于操作系统的内存中。RDS 的系统是 MyISAM 引擎的，因此在 RDS 中是给予该部分一定量的空间的。query_cache 该部分是对查询结果做缓存以减少解析 SQL...
MongoDB实例内存使用率高问题
创建索引过程中的内存消耗 正常的业务数据写⼊情况下，Secondary节点会维持⼀个最大约256M的buffer用于数据回放。在创建索引方面，当Primary节点创建索引完成后，Secondary节点回放过程中可能消耗更多的内存。在 云数据库 MongoDB 版 4.2...
MySQL实际内存分配情况介绍
MyISAM 表不同于 InnoDB 表，其缓存的索引缓存是放在 key_buffer 中的，而数据缓存则存储于操作系统的内存中。RDS 的系统是 MyISAM 引擎的，因此在 RDS 中是给予该部分一定量的空间的。query_cache 该部分是对查询结果做缓存以减少解析 SQL...
生命周期管理概述
全部数据存储在低频存储或归档存储节省的存储费用（费用A）读写低频存储或归档存储中的数据产生的流量费用（费用B）（通用型NAS存储单价-低频存储单价或归档存储）×预估存储容量 文件存储NAS的存储单价，请参见 文件存储NAS产品定价。...
存储过程
存储过程内存管理 存储过程执行过程中的内存占用主要为缓存的cursor，因此 PolarDB-X 对单个cursor所能使用的最大内存以及整个存储过程在执行时占用的内存进行了限制，由参数 PL_CURSOR_MEMORY_LIMIT 和 PL_MEMORY_LIMIT 进行控制。...
列举存储空间
如果未填写资源组ID，则列举默认资源组中的存储空间。String rsId="rg-aek27tc*;创建OSSClient实例。OSS ossClient=new OSSClientBuilder().build(endpoint,credentialsProvider);try {/列举存储空间。ListBucketsRequest ...
可观测性能力
实时Top Key统计 功能准确性高，且对性能几乎无影响，帮助您掌握Key在内存中的占用、Key的访问频次等信息，溯源分析问题，为您的优化操作提供数据支持。在控制台目标实例详情页的 CloudDBA>实时Top Key统计 页签中，进行热Key与大Key分析，...
离线全量Key分析
您可以通过离线全量Key分析功能来分析 Tair 的备份文件，快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。该功能由 ...
如何使用Prometheus监控Windows
进程内存工作集（Bytes）Major WMI（WorkingSet）进程的工作集是进程的虚拟地址空间中当前驻留在物理内存中的一组页面。工作集仅包含可分页内存分配，不包含不可分页的内存分配。进程I/O总量（Bytes）Major WMI（IODataBytesPerSec）进程...
列存索引中TopK算子的实现
重要 本文中的内存充足是指，算法中用于管理至少K条记录的数据结构可以在执行内存中缓存，而不是TopK查询的输入数据可以在执行内存中缓存。实际上本文讨论的场景，TopK查询的输入数据都是远大于执行内存的。另外，从系统设计的角度上看，...
如何使用Prometheus监控Windows
进程内存工作集（Bytes）Major WMI（WorkingSet）进程的工作集是进程的虚拟地址空间中当前驻留在物理内存中的一组页面。工作集仅包含可分页内存分配，不包含不可分页的内存分配。进程I/O总量（Bytes）Major WMI（IODataBytesPerSec）进程...
高级配置：内存缓存本地目录
当这些实例加载相同的模型时，会直接从远端内存中的内网进行拉取，以实现远端命中。在这种情况下，文件的读取时间和文件大小呈线性相关。当服务进行扩容时，新的实例会自动加入已有的内存共享集群，并且初始化模型加载时可以直接从远端进行...
生命周期管理FAQ
在备份低频存储或归档存储中的文件时，云备份服务需要读取目标文件中的数据，文件存储NAS将收取低频存储或归档存储读流量费用。更多信息，请参见 通用型NAS计费。如何关闭生命周期管理功能？启用生命周期管理功能，您可以将通用型NAS文件...
发现并处理大Key和热Key
对 Tair 的RDB备份文件进行定制化的分析，帮助您发现实例中的大Key，掌握Key在内存中的占用和分布、Key过期时间等信息，为您的优化操作提供数据支持，帮助您避免因Key倾斜引发的内存不足、性能下降等问题。通过redis-cli的 bigkeys 和 ...
资源预估选型
使用表格存储中的数据读写，索引的写入、查询、分析，通道服务等操作均会消耗VCU的计算资源。通过QPS近似评估VCU的建议请参见下表。由于计算资源的消耗涉及较多因素，请结合实际业务评估VCU。重要 读写行的大小，请求的Cache命中率、Filter...
查看低频/归档存储文件
您可以通过NAS控制台查看已转储至低频存储或归档存储中的文件、低频存储或归档存储使用量以及该文件最近一次被访问的时间等信息。查看低频/归档存储文件使用量 登录 NAS控制台。在左侧导航栏，选择 生命周期管理>低频/归档存储文件管理。在...
对象存储优化
分析数据访问模式并对数据进行转储或删除 您可以分析数据访问模式并配置 生命周期规则，自动将访问频率较低的数据转换为成本更低的存储类型，或者在到期日之后自动删除数据。例如，通过将数据从标准存储转换为低频访问存储，您可以节省高达...
表格存储中表、行、列、值和电子表格的类比
表格存储中的表存储着用户的结构化数据。用户可以在表中查询、插入、修改和删除数据。一个用户可以拥有多个表。数据在表中以行、列、值的形式来组织。上图展示了表格存储中表及其它概念与电子表格的类比：表：类似电子表格中底端的标签，...
对象存储OSS
性能 如果您的云服务器ECS和对象存储OSS在同一个地域，那么通过云服务器ECS访问对象存储OSS中的数据理论上是最快的。OSS的设计也使其服务端延迟相对于网络延迟来讲可以忽略不计。此外，OSS对于存储量、请求数和用户数的扩展特性，使其可以...
内存诊断
tmpfs Linux临时文件系统，是一种基于内存的文件系统，读写的文件内容只存在内存中。hugetlb 基于文件系统的大页内存。内核内存 内核态内存重点关注Sunreclaim及伙伴系统的使用量，内存泄露通常都是指这两个指标异常。指标 说明 ...
通用型NAS计费
通用型NAS计费项 通用型NAS按照存储规格、存储大小（每小时峰值）和时长收取一定的存储费用。如果您的业务涉及生命周期管理功能时，NAS会根据您转存储的存储类型收取存储容量费用和数据读写流量费用。关于生命周期管理的详细信息，请参见 ...
如何基于LSM-tree架构实现一写多读
最后，各个 有序树 可以进行归并，将内存中的增量数据迁移到磁盘上，磁盘上的多个 有序树 可以进行归并，优化树的形状，整个LSM-tree是一个有序的索引组织结构。在云原生数据库时代，一写多读技术已被广泛应用于生产环境中，主要云厂商都有...
冷热分层存储
OSS-HDFS服务会根据 步骤2 设置的存储策略应用生命周期中对应的转储策略。生命周期规则创建后的24小时内，OSS会加载规则。规则加载完成后，OSS会在每天的北京时间08:00开始执行规则，具体执行时间取决于文件数量，最快48小时内转换为指定的...
计费常见问题
存储容量超过存储包容量 当已购买的存储包无法抵扣文件系统存储容量，您可以购买资源包来抵扣该文件系统超出部分的存储容量。存储包到期 存储包到期后，您可以购买资源包来抵扣该文件系统超出部分的存储容量。说明 存储包绑定文件系统后，...
Tair开发运维规范
离线全量Key分析：帮助您快速发现实例中的大Key，帮助您掌握Key在内存中的占用和分布、Key过期时间等信息。实时Top Key统计：帮助您快速发现实例中的热点Key，为进一步的优化提供数据支持。评估并开启审计日志功能。开通审计日志功能后，可...
功能特性
如果您在表格存储中的数据有着独特的结构，希望自定义开发逻辑来处理每一行数据，例如解析特定的JSON字符串，您可以使用用户自定义函数UDF（User Defined Function）来处理表格存储中的数据。MaxCompute Spark 使用Spark计算引擎时，支持...
创建数据取回任务
如果您需要频繁访问低频介质中存储的文件，建议您创建数据取回任务，将指定文件或目录中的数据取回至通用型NAS存储空间，避免频繁访问产生读写流量费用。本文介绍如何创建数据取回任务。计费说明 在执行数据取回任务时，NAS会根据目标文件...
设置生命周期策略
您可以基于最后一次访问时间的规则创建生命周期策略，定期将通用型NAS文件系统内的多个文件或目录转储为指定的存储类型，从而节省存储费用。费用说明 低频存储类型费用说明 低频存储容量费用：根据您转储至低频存储中的文件大小、时长收取...
什么是表格存储
适用于海量账单、IM消息、物联网、车联网、风控、推荐等场景中的结构化数据存储，提供海量数据低成本存储、毫秒级的在线数据查询和检索以及灵活的数据分析能力。基本概念 在使用 表格存储 前，您需要了解以下基本概念。术语 说明 地域 地域...
成本估算策略介绍
综上所述，可以发现使用单资源估算策略中的内存单资源估算策略，可以使分配的成本达到总成本的90%，因此对于集群中的业务资源申请类型比较集中的场景，推荐您使用单资源估算策略。示例2：集群中的业务资源申请类型比较平均 如下图所示，...
常见问题
教育行业：K12、在线英语等在线教育，将数据存储到OSS，结合OSS传输加速或CDN加速产品，实现海量数据的存储以及内容分发方案。AI/物联网：自动驾驶、物联网等场景。自动驾驶将采集的训练数据通过闪电立方采集与迁移到OSS。物联网家庭视频...
- 产品推荐
- 这些文档可能帮助您