数据分层存储概述
日志服务提供分层存储功能，您可以按需将数据进行热存储、低频存储和归档存储...按写入数据量计费 30天热存储免费权益 生命周期管理 日志服务支持自定义存储生命周期，但需基于存储保存时间迁移策略，具体信息，请参见 数据存储生命周期管理。
ODS层设计规范
任务的输出名称，即输出表的名称，需要与数据存储及生命周期管理规范保持一致。详情请参见 数据存储及生命周期管理规范。数据存储及生命周期管理规范 数据表类型 存储方式 最长存储保留策略 ODS流水型全量表 按天分区 不可再生情况下，永久...
通用数据开发
通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中，虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示：数据产生：业务系统每天会产生大量结构化的...
选型配置说明
提供HBase服务，同时可以基于OSS-HDFS（JindoFS服务）解耦计算集群与数据存储。支持JindoData本地缓存以进一步提高数据服务集群的读写性能。HBase、Zookeeper、JindoData E-MapReduce节点 E-MapReduce节点有主实例（Master）、核心实例...
数据存储
根据采集到的不同数据类型，AnalyticDB采用不同的后台存储系统来进行监控数据的存储。时序数据存储 时序数据库对时序数据的写入、聚合以及检索都做了特定优化，AnalyticDB采集到的时序数据主要存在时序数据库中。目前每个AnalyticDB实例有...
将MaxCompute数据同步到表格存储
创建数据源时，您需要测试资源组的连通性，以保证同步任务使用的资源组能够与数据源连通，否则将无法正常执行数据同步任务。重要 数据同步时，一个任务只能使用一种资源组。资源组列表默认仅显示独享数据集成资源组，为确保数据同步的稳定...
应急恢复
费用说明 应急恢复费用由沙箱存储费用和沙箱实例费用两部分组成：计费项 费用详情 沙箱存储费用 开启沙箱功能后，系统会自动同步待恢复的数据至沙箱存储中并生成沙箱实例快照，DBS会根据沙箱存储中的数据量产生沙箱存储费用，详情请参见 ...
应急恢复
费用说明 应急恢复费用由沙箱存储费用和沙箱实例费用两部分组成：计费项 费用详情 沙箱存储费用 开启沙箱功能后，系统会自动同步待恢复的数据至沙箱存储中并生成沙箱实例快照，DBS会根据沙箱存储中的数据量产生沙箱存储费用，详情请参见 ...
产品概述
产品简介 PolarDB-X 1.0 是由阿里巴巴自主研发的PolarDB分布式版数据库，融合分布式SQL引擎与分布式自研存储X-DB，基于云原生一体化架构设计，可支撑千万级并发规模及百PB级海量存储。专注解决海量数据存储、超高并发吞吐、大表瓶颈以及...
DAS企业版介绍
SQL洞察 功能中SQL明细数据的存储时长与DAS专业版设置的存储时长一致。安全审计 的实时审计检测结果存储时长最长为30天。只能对开启DAS企业版后且在 数据存储时长 范围内的数据进行 搜索（审计）、安全审计 和 SQL洞察。关闭数据库实例的...
文件系统存储类型
存储类型对比 对比指标 标准存储 低频存储 归档存储 平均4K读延迟 容量型：10 ms 高级型：2 ms 性能型：2 ms 首次读数据时，延迟25~50 ms，之后与访问标准存储中的数据一致。首次读数据时，延迟25~50 ms，之后与访问标准存储中的数据一致。...
常见问题
对于DAS企业版 V1数据总存储时长大于30天的数据库实例，提供异步迁移能力，迁移时长与数据量有关，大约0.2 TB/天，迁移完成后可使用DAS企业版 V3提供的SQL洞察和审计功能。说明 由于迁移存在并发限制，当迁移任务队列拥挤时，预计迁移完成...
数据量
备份数据量 通过备份链路的实际数据大小，与数据文件空间不同，备份数据量取决于数据库类型、备份方式、备份粒度等因素。存储数据量 存放存储介质的实际数据大小，与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩...
功能特性
Hudi存储 数据导入与导出 功能集 功能 功能描述 参考文档 大数据数据源 Maxcompute数据源 AnalyticDB for MySQL支持通过外表、DataWorks两种方式将MaxCompute数据导入至数仓版或湖仓版集群，也支持通过外表将AnalyticDB for MySQL数仓版...
数据上云工具
Flume（DataHub通道系列）Apache Flume是一个分布式的、可靠的、可用的系统，可高效地从不同的数据源中收集、聚合和移动海量日志数据到集中式数据存储系统，支持多种Source和Sink插件。Apache Flume的DataHub Sink插件可以将日志数据实时...
计费项概览
存储空间的费用与数据量大小和存储时长有关。按容量计费（按量付费）+存储包 按容量计费（按量付费）按空间计费（包年包月）说明 存储空间不支持包年包月计费。若您购买集群时选择 包年包月，仅对计算节点的费用有效。因此，包年包月的集群...
计费项概览
存储空间的费用与数据量大小和存储时长有关。按容量计费（按量付费）+存储包 按容量计费（按量付费）按空间计费（包年包月）说明 存储空间不支持包年包月计费。若您购买集群时选择 包年包月，仅对计算节点的费用有效。因此，包年包月的集群...
连续查询
以下示例介绍了如何通过连续查询与数据库TTL设置来实现数据降精度与长期存储。示例 假设，原始数据采样周期为1秒，数据量较大，只能保存最近一个月的数据。降采样到分钟精度后，数据可以保存一年。创建数据库db_sensor_month，将原始数据...
互联网服务：小打卡
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍小打卡如何通过 PolarDB-X 应对业务挑战。所属...
计费项概览
存储空间的费用与数据量大小和存储时长有关。按容量计费（按量付费）+存储包 按容量计费（按量付费）按空间计费（包年包月）Serverless 说明 推荐购买存储包，更划算。详情请参见 搭配存储包。关于存储空间计费规则，请参见 存储空间计费...
什么是数据库备份DBS
内置存储与用户OSS：DBS提供数据库的备份恢复能力，备份数据保存在云存储上，云存储支持内置存储、用户OSS。更多详情，请参见 内置存储与用户OSS。支持的数据库 请参见 支持的数据库引擎与功能。常见问题和故障处理 使用DBS时遇到的各类...
SQL洞察
关闭SQL洞察和审计功能后，不会对业务产生影响，但是SQL洞察和审计的所有存储数据会被清空，请将数据导出并保存至本地后，再关闭SQL洞察和审计功能。详情请参见 关闭SQL洞察和审计。挂载到 PolarDB-X 1.0（DRDS）的 RDS MySQL 实例执行一条...
表格存储
表格存储（Tablestore）是阿里云自研的结构化数据存储，提供海量结构化数据存储以及快速的查询和分析服务。表格存储提供兼容HBase的WideColumn模型、消息模型Timeline以及时空模型Timestream，实现PB级存储、千万TPS以及毫秒级延迟的服务...
什么是图数据库GDB?
图数据库（Graph Database，简称GDB）是一种支持Property Graph图模型、用于处理高度连接数据查询与存储的实时、可靠的在线数据库服务。它支持Apache TinkerPop Gremlin查询语言，可以帮您快速构建基于高度连接的数据集的应用程序。图数据...
常见问题
云数据库 SelectDB 版 与数据管理服务DMS原生搭配，提供可视化、易用的SQL查询编辑器，减少数据管理工作量。云数据库 SelectDB 版 仅需投入少量运维人力。云数据库 SelectDB 版 内核是基于 Apache Doris 内核开发的商业化版本，基于云架构...
概述
系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，同时在数据仓库和DLA中创建与数据源表相同的表结构，基于目标数据仓库进行数据分析，不影响数据源端的线上业务运行。方案优势 T+1全量同步一键建仓...
Serverless存储层
云原生数据仓库AnalyticDB MySQL版 采用计算存储分离的架构，通过云原生技术实现了池化，提供了Serverless存储的能力。Serverless架构下的存储资源支持独立弹性伸缩，同时提供了按需横向弹性（扩展存储节点数）和按需纵向弹性（升配存储...
查看快照容量
本文为您介绍如何查看单个数据库文件系统所有快照的容量。前提条件 您已经为某个文件系统至少创建过一份快照。具体操作，请参见 创建快照。根据快照链查看快照容量 快照链是一个数据库文件系统中所有快照组成的关系链，一个文件系统对应一...
RDS与自建数据库对比优势
云数据库RDS提供高可用、高可靠、高安全、可扩展的托管数据库服务，在性能等同于商业数据库的同时，其价格相比ECS自建数据库和自购服务器搭建数据库更加低廉，能够节约大量部署及维护成本。价格对比 费用 云数据库RDS ECS自建数据库 自购...
资产安全概述
密切结合生产开发场景：在开发生产过程中，资产安全与数据流转场景紧密结合，保障在Dataphin数据开发周期中的数据安全。相关概念 模块 概念 概念解释 敏感数据识别 数据分级 数据分级是对数据的敏感等级的设定，用于对数据的敏感等级进行...
产品架构
数据库分层架构 在数据库分层架构中，使用 Tablestore 配合MySQL来完成应用系统的业务需求，利用MySQL的事务能力来处理对事务强需求的写操作与部分读操作，利用 Tablestore 的数据检索能力和大数据存储来实现数据存储、查询与分析。...
Global AWR用户指南
架构与数据流 AWR架构说明 采集层：UE作为代理进程部署于物理机，负责采集 PolarDB PostgreSQL版 数据库集群的性能数据及事件信息。存储层：UE完成采集后，您可以配置将采集到的数据回写到对应的数据库集群中。展示层：提供Grafana展示,可...
Hive数据导入
Hive存储模式为 数据湖存储 的E-MapReduce集群，数据存储在OSS中，可以通过元数据发现功能将数据导入 湖仓版（3.0）。具体操作，请参见 通过元数据发现导入至湖仓版。ECS自建CDH集群。已创建Hive库表，且Hive表为分区表。具体操作，请参见 ...
数据传输与迁移概述
数据管理、数据开发、数据治理、数据地图、数据资产管理、需要查看数据样例数据。数据分析汇总与可视化展现。典型场景。类型 典型场景 数仓管理员对数据进行预览 DataWorks-数据分析、数据管理、数据开发调度（数据通道）。Kettle。商业...
Global AWR用户指南
架构与数据流 AWR架构说明 采集层：UE作为代理进程部署于物理机，负责采集 PolarDB PostgreSQL版（兼容Oracle）数据库集群的性能数据及事件信息。存储层：UE完成采集后，您可以配置将采集到的数据回写到对应的数据库集群中。展示层：提供...
查看并管理运行记录
运行记录为您保存近15天的即席查询、运行计算任务、逻辑数据表预览、派生指标冒烟测试、资产数据预览、OpenAPI数据查询的记录。本文为您介绍如何查看运行记录。查看运行记录 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，...
查看并管理运行记录
运行记录为您保存近15天的即席查询、运行计算任务、逻辑数据表预览、派生指标冒烟测试、资产数据预览、OpenAPI数据查询的记录。本文为您介绍如何查看运行记录。查看运行记录 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，...
创建与释放全球多活数据库集群
如同步类型仅为增量同步，DTS要求数据库的本地Binlog日志保存24小时以上，如同步类型包含全量同步和增量同步，DTS要求数据库的本地Binlog日志至少保留7天以上（您可在全量同步完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法...
什么是MaxCompute
在一套数据仓库服务和用户接口下，实现数据湖与数据仓库的关联分析。详细信息，请参见 MaxCompute湖仓一体概述。离线实时一体 与实时数仓Hologres深度融合，支持外部表关联查询，支持存储层直读，查询效率相比其他类型外部表高5倍以上。...
创建备份计划
使用DBS内置存储池默认按量付费，购买存储包后，存储费用较按量付费更加优惠，且购买的存储包容量越大，折扣力度越大，详情请参见 使用存储包。无需购买：如果您在配置备份计划时，将数据备份至您自己的阿里云OSS或自建NAS中，将不会产生...
- 产品推荐
- 这些文档可能帮助您