管理平台系统表和时序/快照表
在左侧导航栏，选择 数据服务 数据存储。在 数据存储 页面单击 离线存储 页签。单击 平台系统表 或 时序/快照表 页签，查看对应类型的存储表。平台系统表 您可以查看已创建的产品和设备的信息。产品表：存储了已备份实例的产品元信息，包括...
Hive使用JindoSDK处理OSS-HDFS服务中的数据
在配置文件中指定OSS-HDFS服务路径 您可以在Hive Metastore的 hive-site.xml 配置文件中设置 hive.metastore.warehouse.dir 到OSS-HDFS服务路径，然后重启Hive Metastore，后续创建的数据库和数据库下的表均默认存储于OSS-HDFS服务路径中。...
Hive以EMR集群的方式处理OSS-HDFS服务中的数据
在配置文件中指定OSS-HDFS服务路径 您可以在Hive Metastore的 hive-site.xml 配置文件中设置 hive.metastore.warehouse.dir 到OSS-HDFS服务路径，然后重启Hive Metastore，后续创建的数据库和数据库下的表均默认存储于OSS-HDFS服务路径中。...
Kafka集群的数据存储格式
DTS支持选择迁移或同步到Kafka集群的数据存储格式，本文为您介绍数据格式的定义说明，方便您根据定义解析数据。数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化...
Kafka集群的数据存储格式
DTS支持选择迁移或同步到Kafka集群的数据存储格式，本文为您介绍数据格式的定义说明，方便您根据定义解析数据。数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化...
存储Flexvolume概述
本文介绍支持的存储服务和数据卷的情况。重要 Flexvolume 1.18之后不再迭代和更新，在1.20版本之后的新建集群已不再支持Flexvolume插件，Flexvolume插件已弃用。对于存量的集群，您可以通过以下方式处理：若是无存储集群的Flexvolume插件，...
使用冷热分层存储
为避免配置错误导致冷热分层无法正常工作，OSS会自动创建同时包含以下三种策略的生命周期规则：指定OSS-HDFS的数据存储目录.dlsdata/下携带Key为 transition-storage-class、Value为 IA 标签的数据在1天后转为低频访问存储。指定OSS-HDFS的...
数据集成服务
当您的现有业务对数据库的并发读写、扩展性和可用性的要求较高，且需要使用复杂的检索或大数据分析时，如果原有数据库的数据架构不能满足现在的业务需求或改造成本较大，则您可以通过DataWorks数据集成服务将现有数据库中的数据迁移到...
数据重排
在MaxCompute的使用过程中，如果已经积累了大量数据占用了大量存储资源，且已经通过削减数据存储生命周期和删除非必要数据等方式进行了治理，在您的存储预算有限，计算资源还有冗余的情况下，可以考虑使用数据重排方式对存储空间进行优化。...
UNLOAD
指定导出数据存储的目标Hologres路径，格式为 'jdbc:postgresql:/endpoint:port/database?ApplicationName=MaxCompute&[currentSchema=schema&][useSSL={true|false}&]table=holo_table_name/'。更多Hologres路径信息，请参见 创建Hologres...
UNLOAD
指定导出数据存储的目标Hologres路径，格式为 'jdbc:postgresql:/endpoint:port/database?ApplicationName=MaxCompute&[currentSchema=schema&][useSSL={true|false}&]table=holo_table_name/'。更多Hologres路径信息，请参见 创建Hologres...
使用UNLOAD命令
指定导出数据存储的目标Hologres路径，格式为 'jdbc:postgresql:/endpoint:port/database?ApplicationName=MaxCompute&[currentSchema=schema&][useSSL={true|false}&]table=holo_table_name/'。更多Hologres路径信息，请参见 创建Hologres...
方案背景
表格存储作为阿里云提供的一款全托管、分布式NoSql型数据存储服务，具有【海量数据存储】、【热点数据自动分片】、【海量数据多维检索】等功能，天然地解决了数据大爆炸这一挑战；在应对数据横向、纵向扩展上能充分发挥其优势。多元索引...
附录一：企业钉群服务产品清单
基础存储服务 对象存储 OSS 存储 基础存储服务 文件存储 NAS 存储 基础存储服务 文件存储 HDFS 版 存储 基础存储服务 表格存储 Tablestore 存储 基础存储服务 数据库文件存储 DBFS 存储 存储数据服务 日志服务 SLS 存储 存储数据服务 智能...
新功能试用申请
日期 功能名称 描述 2024年9月 存储容灾 MaxCompute存储容灾是以项目（Project）为单位，将数据存储服务的可用性从单一可用区（AZ）扩展到同城三个可用区，并利用同城三个可用区之间的物理隔离特性与低延迟的网络连接，提供了跨数据中心的...
同城容灾
MaxCompute同城容灾支持将数据存储服务和计算服务的可用性从单一可用区（Availability Zone）扩展到同城三个可用区，并利用同城三个可用区之间的物理隔离特性与低延迟的网络连接，提供了跨数据中心的数据实时同步和故障隔离能力，确保业务...
支持的云服务
表格存储 表格存储是构建在阿里云飞天分布式系统之上的分布式NoSQL数据存储服务，MaxCompute 2.0支持直接通过外部表方式访问表格存储中的表数据并进行处理，详情请参见 Tablestore外部表。更多表格存储信息，请参见 表格存储。对象存储OSS ...
文件存储CPFS
CPFS的数据存储在集群中的多个数据节点，并可由多个客户端同时访问，从而能够为大型高性能计算机集群提供高IOPS、高吞吐、低时延的数据存储服务。适用场景 文件存储CPFS 针对高性能计算场景的性能要求进行了深度优化，提供对数据毫秒级的...
管理智能存储分层
本文将为您介绍日志服务数据存储生命周期管理。什么是智能存储分层 存储类型 类型 说明 热存储 热存储是一种可扩展、高可用的数据存储方案，用于存储经常被访问的数据。支持数据实时访问，提供高性能的日志查询和分析功能，适用于数据高频...
最佳实践
迁移到X-Engine之后，很多业务可以免除分库分表的需求，使用单库即可承载近10 TB的数据存储服务。作为中国领先的电子商务服务提供商，用户体量庞大，阿里内部有非常多的在线业务承受非常大的存储成本压力。接下来为您介绍阿里巴巴集团内部...
X-Engine最佳实践
迁移到X-Engine之后，很多业务可以免除分库分表的需求，使用单库即可承载近10 TB的数据存储服务。作为中国领先的电子商务服务提供商，用户体量庞大，阿里内部有非常多的在线业务承受非常大的存储成本压力。接下来为您介绍阿里巴巴集团内部...
MaxCompute安全白皮书
同城容灾 MaxCompute同城容灾采用将数据存储服务和计算服务扩展到同城3个可用区（Availability Zone）的方式，以提升客户业务的抗风险能力。同城容灾主要适用于金融、关键基础设施等行业，可以确保业务系统不会因单一数据中心故障而停止...
JindoFS实战演示
Flume高效写入OSS Flume高效写入OSS 2021-06-01 Flume是一个分布式、可靠、高可用的系统，支持从不同数据源高效地收集、聚合、迁移大量日志数据，聚合到中心化的数据存储服务，被广泛用于日志收集场景中。由于OSS本身不支持Flush功能，而...
2021年
2021-08-10 华北2（北京）华东2（上海）华北3（张家口）华东1（杭州）华南1（深圳）西南1（成都）更新或删除数据（UPDATE|DELETE）MERGE INTO MaxCompute流式数据通道服务功能商业化发布 MaxCompute流式数据通道服务提供流式语义API支持，...
通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark
使用场景 大数据性能评估 当您希望评估使用OSS-HDFS服务作为Hadoop数据存储时的大数据处理性能，特别是对于大规模数据分析和查询优化工作负载，TPC-DS可以作为标准的决策支持系统基准测试工具。数据湖架构验证 如果您正在构建或已经拥有...
DTS增量数据迁移时MySQL存储引擎检查失败
问题描述 在启动MySQL之间的增量数据迁移任务时，DTS将在预检查阶段对源数据库中的表进行存储引擎检查。本文将介绍源存储引擎检查失败对应的修复方法。问题原因 这个检查项主要检查源数据库中是否存在增量迁移不支持的存储引擎，目前MySQL...
背景信息
创建迁移任务流程 创建迁移任务流程如下图所示：重要 执行在线迁移任务过程中，读取源站数据会产生公网流出流量费，该费用由源站的存储服务提供商在源站收取。教程内容 本教程包含以下内容：准备工作 迁移实施 后续操作
LOAD
如果您需要将外部存储上的数据导入MaxCompute的表或表的分区中，可以通过LOAD命令实现该操作。本文为您介绍如何使用LOAD命令将外部存储上的CSV格式或其他开源格式数据导入MaxCompute。本文中的命令您可以在如下工具平台执行：MaxCompute...
LOAD
如果您需要将外部存储上的数据导入MaxCompute的表或表的分区中，可以通过LOAD命令实现该操作。本文为您介绍如何使用LOAD命令将外部存储上的CSV格式或其他开源格式数据导入MaxCompute。本文中的命令您可以在如下工具平台执行：MaxCompute...
如何查看数据库实例DAS专业版已使用的数据存储空间
本文主要介绍如何查看数据库实例DAS专业版已使用的数据存储空间。详细信息 您可以通过以下两种方式查看：在 SQL洞察和审计 页面查看：登录 DAS控制台。在左侧导航栏单击 实例监控，进入 实例监控 页。在 实例监控 页，单击目标实例名称进入...
计费概述
本文介绍DLA的三种计费方式：按计算资源付费、按扫描量付费和数据湖存储服务付费。计费方式 计费类别 说明 适用场景 相关文档 按计算资源付费 数据湖分析CU版根据购买的CU规格进行计费，费用跟运行查询扫描的数据量没有关系。计费模式如下...
背景信息
创建迁移任务流程 创建迁移任务流程如下图所示：重要 执行在线迁移任务过程中，读取源站数据会产生公网流出流量费，该费用由源站的存储服务提供商在源站收取。教程内容 本教程包含以下内容：准备工作 迁移实施 后续操作
背景信息
创建迁移任务流程 创建迁移任务流程如下图所示：重要 执行在线迁移任务过程中，读取源站数据会产生公网流出流量费，该费用由源站的存储服务提供商在源站收取。教程内容 本教程包含以下内容：准备工作 迁移实施 后续操作
使用在线迁移服务迁移数据
阿里云在线迁移服务是阿里云提供的存储产品数据通道。使用在线迁移服务，您可以轻松实现文件存储NAS之间的数据迁移。本文介绍如何通过在线迁移服务实现阿里云文件存储NAS之间的数据迁移。使用在线迁移服务，您只需在控制台填写源NAS数据...
GetExternalStore-获取指定外部存储数据
调用GetExternalStore接口获取指定外部存储数据的详细信息。接口说明 目前支持 OSS 数据源和 VPC 下的 RDS MySQL 数据库作为外部存储数据。Host 由 Project 名称和日志服务 Endpoint 构成，您需要在 Host 中指定 Project。调试 您可以在...
东软案例
如下图所示，阿里Lindorm数据库在赋能政企数字运维团队更强大的运维大数据分析能力的同时，大幅度提升了政府、企业数字系统性能和在线服务的客户数字体验，降低了低价值密度监控数据存储管理成本。图 1.阿里云Lindorm数据库驱动的IT运维...
背景信息
本教程讲解了如何将腾讯云对象存储COS中的数据迁移到阿里云对象存储 OSS。...执行在线迁移任务过程中，读取源站数据会产生公网流出流量费，该费用由源站的存储服务提供商在源站收取。教程内容 本教程包含以下内容：准备工作 迁移实施 后续操作
背景信息
创建迁移任务流程 创建迁移任务流程如下图所示：重要 执行在线迁移任务过程中，读取源站数据会产生公网流出流量费，该费用由源站的存储服务提供商在源站收取。教程内容 本教程包含以下内容：准备工作 迁移实施 后续操作
数据库支持说明
本文为您介绍了数据库存储服务DBFS目前支持及推荐使用的数据库及OS版本。正式商用 正式商用推荐使用的数据库列表：MySQL 5.7.x PostgreSQL 10.x MongoDB 4.4 正式商用推荐使用的Linux版本：Alibaba Cloud Linux 2.1903 64位 CentOS 8.x 64...
背景信息
本教程讲解如何将七牛云对象存储中的数据迁移至阿里云对象存储OSS。...重要 执行在线迁移任务过程中，读取源站数据会产生公网流出流量费，该费用由源站的存储服务提供商在源站收取。教程内容 本教程包含以下内容：准备工作 迁移实施 后续操作
- 产品推荐
- 这些文档可能帮助您