设置数据冷热存储策略
如果您想要以指定规则对文件引擎中存储的数据进行归档，将冷热数据分开存储，可以通过命令设置冷热存储策略，按照目录级别对数据进行划分。冷热分离可以有效提高热数据的查询效率，减少冷数据的存储成本。本文介绍通过开源HDFS客户端设置...
概述
数据同步过程中，数据源中的数据存储在目标数据仓库OSS中，搭建数据仓库过程中不会对数据源端的业务系统产生任何压力。通过DLA控制台配置建仓任务，支持自定义设置定时数据投递。极致的计算能力，充分发挥DLA的计算能力，通过DLA的大内存、...
冷热分层存储
为避免配置错误导致冷热分层无法正常工作，OSS会自动创建同时包含以下三种策略的生命周期规则：指定OSS-HDFS的数据存储目录.dlsdata/下携带Key为 transition-storage-class、Value为 IA 标签的数据在1天后转为低频访问存储。指定OSS-HDFS的...
创建分析存储
如果希望分析存储中的数据永不过期，可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。syncOption 分析存储同步选项。取值范围如下：SYNC_TYPE_FULL表示同步全部数据到分析存储。SYNC_TYPE_INCR表示同步增量数据到分析...
对象存储优化
一般情况下，对象存储中的数据无论大小都必须作为一个整体进行访问。OSS SelectObject允许您使用简单的SQL语句检索对象，这意味着您的应用程序无需使用计算资源来扫描和过滤对象中的数据。使用OSS SelectObject可以将查询性能提升4倍，并将...
元数据管理
选择元数据表中数据存储的位置。选择元数据表的存储格式。指定元数据表的分隔符。手动定义元数据表的列，指定列编号、列名称、是否是分区列等信息。删除元数据库 1.进入元数据管理-元数据库页面。2.找到想要删除的元数据库，点击右侧的删除...
创建分析存储
如果希望分析存储中的数据永不过期，可以设置为-1。您可以通过UpdateTimeseriesAnalyticalStore接口修改。syncOption 分析存储同步选项。取值范围如下：SYNC_TYPE_FULL表示同步全部数据到分析存储。SYNC_TYPE_INCR表示同步增量数据到分析...
更新分析存储的数据生命周期
如果希望分析存储中的数据永不过期，可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为test_analytical_store的分析存储配置信息，将数据生命周期更新为30天（即2592000秒）。func UpdateTimeseriesAnalyticalStore...
更新分析存储的数据生命周期
如果希望分析存储中的数据永不过期，可以设置为-1。示例 以下示例用于更新test_timeseries_table时序表下名为test_analytical_store分析存储的数据生命周期为30天（即2592000秒）。public void updateAnalyticalStore(TimeseriesClient ...
通过控制台使用分析存储
操作 说明 更新分析存储的生命周期 当需要清理分析存储中的历史数据或者希望延长数据保存时间时，您可以更新分析存储的生命周期。在 实例管理 页面的 实例详情 页签，单击 时序表列表 页签。在 时序表列表 页签，单击时序表名。在 基本详情...
基本概念
云数据库SelectDB版 支持的表引擎如下：Aggregate表引擎 Unique表引擎 Duplicate表引擎 索引（Index）索引是对表中一列或多列的值进行排序的一种结构，使用索引 可以快速过滤表中的数据，提高数据的查询效率。目前 云数据库SelectDB版 支持...
计费常见问题
开启沙箱功能后，DBS会根据沙箱存储中的数据量产生沙箱存储费用。创建沙箱实例后，DBS会根据沙箱实例规格及使用时长产生沙箱实例费用。费用详情，请参见 DBS沙箱费用。说明 DBS控制台暂不支持直接创建按量付费的备份计划。DBS存储包和DBS...
通过SDK使用分析存储
} } 更新分析存储的生命周期 当需要清理分析存储中的历史数据时，您可以更新分析存储的数据生命周期TTL。更新分析存储的TTL后，表格存储会自动异步删除分析存储中超过TTL的数据。以下示例用于更新test_timeseries_table时序表下名为test_...
设置生命周期策略
重要 删除策略并不会清除低频存储或归档存储中的数据。为避免残余低频数据或归档数据产生资费，请在删除策略前对数据进行取回操作。具体操作，请参见 创建数据取回任务。常见问题 如何设置生命周期管理策略？所有文件都可以转储到低频存储...
冷数据分层存储计费规则
本文介绍开启冷数据分层存储后，在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后，PolarDB PostgreSQL版 支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据分层存储的详细介绍，请...
冷数据分层存储计费规则
本文介绍开启冷数据分层存储后，在冷数据存储方面的计费规则。计费规则 当 开启冷数据分层存储 后，PolarDB PostgreSQL版（兼容Oracle）支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据分层存储...
冷数据存储计费规则（可选）
本文介绍了开启冷数据归档功能后，在冷数据存储方面的计费规则。当 开启冷数据归档 后，PolarDB 企业版支持将集群的冷数据转存至低成本的OSS上进行存储，以降低数据存储成本。说明 更多关于冷数据归档的详细介绍，请参见 冷数据归档概述。...
概述
您可以根据业务需求使用DataX、DTS或者canal工具将MySQL数据库中的数据同步迁移到表格存储（Tablestore）中。使用场景 数据架构变化 随着业务的变化，如果现有业务对数据库并发读写需求、扩展性和可用性需求较高，或需要复杂的检索，原有...
冷存储介绍
冷热分离功能可以自动将表中的热数据存储至读写速度更快的热存储中，将不常访问的历史数据存储至容量型云存储中，从而降低存储成本。如果您在业务上有冷热分离的需求，请参见 冷热分离介绍。开通容量型云存储 如何开通容量型云存储，请参见...
数据湖投递概述
表格存储 数据湖投递可以全量备份或实时投递数据到数据湖OSS中存储，以满足更低成本的历史数据存储，以及更大规模的离线和准实时数据分析需求。应用场景 利用数据湖投递可以实现如下场景需求：冷热数据分层 数据湖投递结合 表格存储 的 ...
物联网存储介绍
表格存储针对物联网场景中的数据存储需求推出了一站式物联网存储IoTstore解决方案，IoTstore解决方案能为物联网场景中的不同类型数据提供统一数据存储平台。同时，支持多种数据源的数据接入、流批计算引擎的对接以及数据可视化展示。整体...
时序模型
写入时序数据到时序表时，分析存储会自动同步时序表中的数据。时序数据写入时序表后，当需要查询时序表中某个时间线的时序数据时，您可以执行如下操作：如果不确定要查询时间线信息（例如度量名称、数据源信息）时，请使用 ...
时序模型
写入时序数据到时序表时，分析存储会自动同步时序表中的数据。时序数据写入时序表后，当需要查询时序表中某个时间线的时序数据时，您可以执行如下操作：如果不确定要查询时间线信息（例如度量名称、数据源信息）时，请使用 ...
ActionTrail日志清洗
对于30天以外的数据可以投递到OSS上，但直接分析OSS中的数据有以下痛点。日志数据格式复杂，不利于直接分析 ActionTrail中保存的是JSON格式的数据，一行内有多条数据，数据以一个Array的形式保存，例如[{"eventId":"event0".},{"eventId":...
存储说明
例如：读取HDFS中的数据。sc.textfile("hdfs:/bucket/path")更改存储类型为OSS。sc.textfile("oss:/bucket/path")对于MR或Hive作业，HDFS命令可以直接操作OSS数据，示例如下。hadoop fs-ls oss:/bucket/path hadoop fs-cp hdfs:/bucket/...
应用场景
表格存储 作为关系数据库的存储补充用于存储历史订单数据并通过DTS实时同步关系数据库中的数据，同时支持使用索引实现多字段组合查询以及支持对接流批计算引擎实现数据统计分析。IM场景 IM（Instant Messaging，即时通讯）已成为当前互联网...
迁移工具
插件 说明 OTSReader 用于读取表格存储表中的数据，并可以通过指定抽取数据范围实现数据增量抽取的需求。OTSStreamReader 用于增量导出表格存储表中的数据。OTSWriter 用于向表格存储中写入数据。通道服务 使用通道服务可以轻松构建高效和...
快速体验
使用DataWorks的 数据开发 功能，将同步到MaxCompute中的数据进行清洗加工，并将结果数据写入MaxCompute表中。说明 RDS MySQL作为本次实验中存储原始数据的数据源。您无需自行准备RDS MySQL云产品及数据，本实验为您提供公共的实验环境与...
功能特性
原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件存储上的所有数据（包括静态存储和动态传输中的数据）都...
物联网设备数据上云存储
物联网平台规则引擎 物联网设备基于消息 Topic 进行通信，使用规则引擎对 Topic 中的数据进行处理然后转发到 TSDB。只需要在规则引擎中配置一些简单的规则，就可以将设备数据存储到指定的资源中实现“采集+计算+存储+…”的全栈服务。如何...
文件系统存储类型
如果您需要频繁访问低频存储或归档存储中的数据，则建议您创建数据取回任务，将指定文件或目录中的数据取回至标准存储，避免频繁访问产生读写流量费用。更多信息，请参见 生命周期管理策略。存储类型对比 对比指标 标准存储 低频存储 归档...
表设计规范
例如，在规范化设计表的同时对数据通道中的数据采集方式进行优化，可以减少分布式系统中小文件的问题，降低表和分区的维护数量。表设计主要影响 表设计影响的操作有：创建表、导入数据、更新表、删除表及管理表。其中，导入数据场景按照...
主备方案介绍
A：LTS不会缓存数据，数据同步中当目标实例无法写入时，会记录读取WAL的点位，保证数据在目标实例恢复后继续同步数据，数据存储在源集群的Hlog中。Q：数据D1写入主实例，但数据D1尚未到达备实例时发生切换，此时备实例中写入一条数据D2后...
数据表-数据概况
功能说明 在数据表详情的数据概况标签页，基于对元数据及存储数据的统计，为您提供了数据表更加详细的指标信息，比如表存储大小、表文件总数、DDL最后更新时间、数据最后更新时间、访问次数、分区存储大小，分区文件数，分区最后更新时间等...
支持的云服务
表格存储 表格存储是构建在阿里云飞天分布式系统之上的分布式NoSQL数据存储服务，MaxCompute 2.0支持直接通过外部表方式访问表格存储中的表数据并进行处理，详情请参见 Tablestore外部表。更多表格存储信息，请参见 表格存储。对象存储OSS ...
存储类型概述
对象存储OSS提供标准、低频访问、归档、冷归档、深度冷归档多种存储类型，全面覆盖从热到冷的各种数据存储场景。...① 数据取回费用中的数据是从底层分布式存储系统读取的数据量，在公网传输的数据量会计入到流出流量的计费项中。
缓冲区管理
主节点Buffer Pool中的数据页，根据是否包含未来数据（即只读节点的回放位点之后新产生的数据），可以分为两类：可以写入存储的数据页和不能写入存储的数据页。该判断依赖以下两个位点：Buffer最近一次修改对应的LSN，即Buffer Latest LSN...
数据安全
数据备份与恢复 云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复功能，该功能基于数据生态服务中的数据迁移，将数据存储至阿里云对象存储服务OSS（Object Storage Service，简称OSS）中，定期全量备份数据，实时增量同步数据，来满足对...
Catalog概述
查询数据 查询内部数据 如果需要查询存储在StarRocks中的数据，请参见 Default Catalog。查询外部数据 如果需要查询存储在外部数据源中的数据，请参见 External Catalog。跨Catalog查询数据 如果需要在一个Catalog中查询其他Catalog中的...
Catalog概述
查询数据 查询内部数据 如果需要查询存储在StarRocks中的数据，请参见 内表数据源。查询外部数据 如果需要查询存储在外部数据源中的数据，请参见 数据湖分析。跨Catalog查询数据 如果想在一个Catalog中查询其他Catalog中数据，可通过 ...
- 产品推荐
- 这些文档可能帮助您