使用冷热分层存储
并不是所有OSS-HDFS中存储的数据都需要频繁访问，但基于数据合规或者存档等原因，部分数据仍然需要继续保存。针对以上问题，OSS-HDFS服务支持数据的冷热分层存储，对于经常需要访问的数据以标准类型进行存储，对于较少访问的数据以低频、...
Serverless存储层
数据存储在对象存储有更低的成本，存算分离更为彻底，按需弹性扩展计算资源，在计算资源组中通过大吞吐量读对象存储数据来满足大数据量的分析需求。此外，还可额外通过加速器来提升性能。在离线混合分析 在离线混合分析将在线和离线分析的...
概述
大部分阿里云用户以CSV格式将数据存储在OSS上，若要提高数据扫描性能，需要借助第三方工具对文件进行格式转换，然后将转换后的数据上传至OSS，整个过程比较繁琐。为减轻用户工作量，您可以直接使用DLA来转换文件格式。假设将1.2GB的数据以...
内置存储与用户OSS
数据灾备（DBS）提供数据库的备份恢复能力，备份数据保存在云存储上，云存储支持内置存储、用户OSS。对比项 DBS内置存储 用户OSS 安全性 客户无法直接访问备份集。已接入DBS安全权限体系。客户可直接访问备份集。需要自行管理备份集安全。...
产品架构
数据库分层架构 在数据库分层架构中，使用 Tablestore 配合MySQL来完成应用系统的业务需求，利用MySQL的事务能力来处理对事务强需求的写操作与部分读操作，利用 Tablestore 的数据检索能力和大数据存储来实现数据存储、查询与分析。...
存储类型概述
对象存储OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。说明 各存储类型的定价，请参见 OSS产品定价。各存储类型的计费方式，请参见 存储费用。标准存储（Standard）提供高可靠、高...
冷热分离
背景信息 冷热分界线是冷数据归档的依据，搜索引擎会根据数据存储量和查询时间覆盖的范围来确定需要将多久之前的数据归档至冷存储。Lindorm将容量型云存储作为冷存储介质，价格仅为标准型云存储的20%，大大降低了存储成本。冷热分界线的...
冷热数据分层存储
存储类型 计费详情 热数据存储 购买集群后已经拥有了热数据存储空间，与购买集群的存储空间相同。冷数据存储 采用按量付费模式。无需提前购买固定的存储空间，先使用，后付费，并按照实际使用的存储空间每小时计费一次。冷数据存储的详细...
基本概念
ClickHouse集群 ClickHouse集群包含若干单位计算资源和存储资源，能够提供ClickHouse引擎数据存储和分析服务的PAAS服务。Worker节点 Worker节点是ClickHouse集群内部的副本节点，参与引擎计算的实际资源。CCU CCU（ClickHouse Compute Unit...
方案设计
数据存储方案 表格存储设计了两张表分别存储数据集的meta和data：meta表示这个数据集的元数据，例如GridDataSetId、各维度长度、自定义属性等。data表示这个数据集里实际的网格数据。data相比meta在数据大小上要大很多。将数据集的meta和...
功能发布记录
数据存储 支持DLF托管存储。存储分析 元数据和存储使用量及趋势：存储量及趋势。库、表、API访问数量及趋势。元数据和存储使用情况排名：库、表、API访问数量及趋势。库、表存储排名。存储分布情况：表小文件数量排名。存储分层分布。存储...
更新分析存储的数据生命周期
当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后，表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
更新分析存储的数据生命周期
当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以使用UpdateTimeseriesAnalyticalStore接口更新时序分析存储的数据生命周期TTL配置。更新分析存储的TTL后，表格存储会自动异步清理分析存储中超过TTL的数据。前提条件 已...
表数据格式
数据存储分桶 为了进一步优化读写效率，Delta Table支持按照BucketIndex对数据进行切分存储，BucketIndex数据列默认复用PK列，bucket数量可通过配置表属性 write.bucket.num 指定，因此对同一张表或分区的数据，写入数据会按PK列值对数据...
DAS企业版介绍
只能对开启DAS企业版后且在 数据存储时长 范围内的数据进行 搜索（审计）、安全审计（旧版）和 SQL洞察。关闭数据库实例的DAS企业版，会关闭SQL洞察和审计功能，不会对业务产生影响，但是会清除所有的DAS企业版相关数据（包括SQL洞察、分析...
存储空间的常见问题
在RDS SQL Server中执行 DELETE 操作删除大量数据后，磁盘空间没有减少的原因与数据库管理系统的设计机制和日志记录行为有关：事务日志记录：SQL Server为了保证数据的一致性和可恢复性，会对每一次数据操作（包括 DELETE）进行详细的日志...
存储空间的常见问题
在RDS SQL Server中执行 DELETE 操作删除大量数据后，磁盘空间没有减少的原因与数据库管理系统的设计机制和日志记录行为有关：事务日志记录：SQL Server为了保证数据的一致性和可恢复性，会对每一次数据操作（包括 DELETE）进行详细的日志...
存储空间的常见问题
在RDS SQL Server中执行 DELETE 操作删除大量数据后，磁盘空间没有减少的原因与数据库管理系统的设计机制和日志记录行为有关：事务日志记录：SQL Server为了保证数据的一致性和可恢复性，会对每一次数据操作（包括 DELETE）进行详细的日志...
时序分析存储概述
分析存储与时序表的数据存储相互独立，允许用户自定义数据的生命周期（TTL），对分析存储的查询操作不会对时序表的读写性能产生影响。分析存储能够自动同步时序表数据，在数据写入速率稳定的情况下，同步操作的延迟通常在 10 分钟内，如果...
最佳实践
迁移到X-Engine之后，很多业务可以免除分库分表的需求，使用单库即可承载近10 TB的数据存储服务。作为中国领先的电子商务服务提供商，用户体量庞大，阿里内部有非常多的在线业务承受非常大的存储成本压力。接下来为您介绍阿里巴巴集团内部...
设置数据保留策略
InfluxDB的数据保留策略可以定义数据在InfluxDB中保存时间，本文介绍如何设置数据保留策略。前提条件 已创建数据库。具体操作，请参见 创建数据库。数据保留策略介绍 InfluxDB可以通过定义数据保留策略，用来控制存储数据量的方式。新创建...
通用云盘数据归档功能
功能优势 开启RDS MySQL通用云盘的数据归档OSS功能后，借助OSS海量、安全、低成本、高可靠的特性，用户能够在RDS MySQL上实现极低成本的归档数据存储，在具备InnoDB事务能力之上支持低频的数据访问，数据存储成本相较于ESSD PL1云盘下降80%...
X-Engine最佳实践
迁移到X-Engine之后，很多业务可以免除分库分表的需求，使用单库即可承载近10 TB的数据存储服务。作为中国领先的电子商务服务提供商，用户体量庞大，阿里内部有非常多的在线业务承受非常大的存储成本压力。接下来为您介绍阿里巴巴集团内部...
创建备份计划
说明 数据量较大时，建议您购买 数据灾备（DBS）提供的 备份实例存储包，用于抵扣后续备份计划的 存储费用，该费用仅在数据存储在 DBS内置存储 时收取。更多存储包的选购建议，请参见本文 常见问题。如需了解备份计划后续可能产生的费用...
X-Engine引擎
因为目标是面向大规模的海量数据存储，提供高并发事务处理能力和降低存储成本，在大部分大数据量场景下，数据被访问的机会是不均等的，访问频繁的热数据实际上占比很少，X-Engine根据数据访问频度的不同将数据划分为多个层次，针对每个层次...
技术架构
其最核心的竞争力不仅体现在性能和扩展性方面，更深层次的则是在面临有许多挑战性的PolarDB客户业务需求和规模化的公有云研发运维过程中而长期积累形成的一系列高可靠、高可用、与数据库协同设计的存储技术。PolarDB PostgreSQL版（兼容...
原理剖析
因为目标是面向大规模的海量数据存储，提供高并发事务处理能力和降低存储成本，在大部分大数据量场景下，数据被访问的机会是不均等的，访问频繁的热数据实际上占比很少，X-Engine根据数据访问频度的不同将数据划分为多个层次，针对每个层次...
Catalog概述
本文为您介绍什么是Catalog（数据目录），以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：保存在StarRocks中的数据。外部数据：保存在外部数据源（例如Apache Hive、Apache Iceberg和Apache Hudi）中的数据。Catalog ...
数据模型
数据时效（TTL）数据时效是指数据保存有效期，超过有效期的数据会被自动清理，默认数据有效期为永久保存。场景示例 某风力电厂包含一系列的智能风力发电机设备，创建名为 Wind-generators 的table来存储所有设备的信息，设备由 ID、型号、...
使用MaxCompute控制台（离线）
基于阿里云对象存储OSS上传数据时，需满足以下条件：已开通OSS并创建Bucket，将待上传数据存储至OSS Bucket中。详情请参见 创建存储空间 和 上传文件。已为操作数据上传的阿里云账号授予可访问目标Bucket的权限，详情请参见 访问控制概述。...
2024年
该方案可以打破数据湖与数据仓库割裂的体系，并将数据湖的灵活性、丰富的多引擎生态与数据仓库的企业级能力进行融合，助力构建数据湖和数据仓库相融合的数据管理平台（本功能处于公测阶段）。湖仓一体2.0使用指南 2024-07-15 新增...
服务器批量迁移
当 迁移实时状态 为 同步中 时，表示服务器数据正在迁移。由于传输数据耗时受源端数据大小，网络带宽等因素影响，请耐心等待迁移任务完成。此时您也可以根据实际需求执行以下操作：修改迁移设置：在 操作 列单击 修改迁移，修改任务名称、...
复制自定义镜像
您可以将某一地域下的自定义镜像复制到其他地域，使用复制后的镜像创建轻量应用服务器，实现轻量应用服务器之间的跨地域无缝迁移。同时可搭配共享自定义镜像...或者将数据迁移至ECS实例，具体操作，请参见 轻量应用服务器数据迁移至ECS实例。
什么是EMR Serverless StarRocks
简化ETL流程与数据处理：StarRocks的物化视图能够替代传统的ETL建模流程。您无需在上游应用中进行数据转换操作，便可以直接在使用物化视图的过程中实现数据的转换与加工，简化了数据处理流程。数据湖分析 StarRocks不仅能高效地分析本地...
轻量应用负载均衡概述
使用限制 同一个阿里云账号下，轻量应用服务器与轻量应用负载均衡存在的总数量上限为20台。同一个阿里云账号在同一个地域下，最多可创建1台轻量应用负载均衡。轻量应用负载均衡提供七层流量负载均衡能力，目前只支持转发来自HTTP协议的请求...
什么是MaxCompute
在一套数据仓库服务和用户接口下，实现数据湖与数据仓库的关联分析。详细信息，请参见 MaxCompute湖仓一体概述。离线实时一体 与实时数仓Hologres深度融合，支持外部表关联查询，支持存储层直读，查询效率相比其他类型外部表高5倍以上。...
数据服务系统配置
系统Redis+应用内存：将缓存数据存储到系统公共的Redis中，将与其他模块共享存储空间，适用于缓存数据量较小的场景。说明 备链路支持将缓存数据存储到Dataphin备链路的系统公共Redis中，适用于缓存数据量较小的场景。仅应用内存：缓存数据...
数据目录概述
StarRocks自2.3版本起支持Catalog（数据目录）功能，实现在一套系统内同时维护内、外部数据，方便您轻松访问并查询存储在各类外部源的数据。本文为您介绍什么是Catalog，以及如何使用Catalog管理和查询内外部数据。基本概念 内部数据：...
添加数据集
DataV数据集支持多种数据源的接入，如数据库、excel表格文件等，通过对数据的结构化存储和元数据的汇集整理，提供高效实用的数据建模能力，可用的算子包括常见的数据聚合函数、按不同时间粒度划分、地理信息处理等。本文为您介绍如何在...
概述
文本介绍 PolarDB-X 集中分布式一体化的相关概念。问题背景 选择集中式数据库还是分布式数据库一直是数据库选型讨论的热点。对于大部分中小企业来说，集中式数据库就能满足其日常...如何管理存储资源池与数据节点弹性规格详见 数据节点管理。
- 产品推荐
- 这些文档可能帮助您