基本概念
栅格数据（Raster Data）是将地理空间分割成有规律的网格，每一个网格称为一个单元（像元或像素），并在各单元上赋予相应的属性值来表示实体的一种数据形式。栅格数据通常有两种类型的栅格数据：专题数据和影像数据。专题数据：每个栅格像...
ActionTrail日志清洗
日志数据格式复杂，不利于直接分析 ActionTrail中保存的是JSON格式的数据，一行内有多条数据，数据以一个Array的形式保存，例如[{"eventId":"event0".},{"eventId":"event1".}]。理论上可以分析上述格式的JSON数据，但非常不便，需要先把每...
查看资源用量大盘
资源用量大盘为您展示当前租户下已使用的数据处理单元总量和按任务类型分别统计的消耗趋势以及按项目粒度统计的消耗增量排行，帮助您了解数据处理单元的消耗情况以及时调整资源规格配置。本文为您介绍如何查看资源用量大盘。前提条件 需...
表基础
行的数目是变化的，它反映了在一个给定时刻表中存储的数据量。SQL 并不保证表中行的顺序。当一个表被读取时，表中的行将以非特定顺序出现，除非明确地指定需要排序。此外，SQL 不会为行分配唯一的标识符，因此在一个表中可能会存在一些完全...
常见问题
物联网家庭视频监控或社会类视频监控等场景，将摄像头采集的视频数据直接上传到OSS，不仅可以实时在APP上进行视频观看，同时可以根据生命周期将存储的数据进行冷热分层，以达成降本+合规的要求。影视渲染行业：影视制作、媒资管理的素材等...
常见问题
对于内部表，所有的数据都存储在MaxCompute中，表中列的数据类型可以是MaxCompute支持的任意一种数据类型。对于外部表，MaxCompute并不真正持有数据，表格的数据可以存放在OSS或OTS中。MaxCompute仅会记录表格的Meta信息，您可以通过...
数据导出到OSS概述
使用场景 适用于以更低成本备份 表格存储 数据或者以文件形式导出 表格存储 数据到本地的场景。使用流程 不同同步方式的使用流程存在差异，请根据所用同步方案按照相应流程执行同步操作。具体操作，请参见 导出全量数据到OSS 和 同步增量...
数据加密
这些数据库或者表中的数据在写入到任何设备（例如磁盘、SSD、PCIe卡）或者服务（例如对象存储OSS）前都会进行加密，因此实例对应的数据文件和备份都是以密文形式存在的。TDE加密采用国际流行的AES算法。密钥由KMS服务加密保存，RDS只在启动...
数据加密
这些数据库或者表中的数据在写入到任何设备（例如磁盘、SSD、PCIe卡）或者服务（例如对象存储OSS）前都会进行加密，因此实例对应的数据文件和备份都是以密文形式存在的。TDE加密采用国际流行的AES算法。密钥由KMS服务加密保存，RDS只在启动...
数据加密
这些数据库或者表中的数据在写入到任何设备（例如磁盘、SSD、PCIe卡）或者服务（例如对象存储OSS）前都会进行加密，因此实例对应的数据文件和备份都是以密文形式存在的。TDE加密采用国际流行的AES算法。密钥由KMS服务加密保存，RDS只在启动...
数据加密
这些数据库或者表中的数据在写入到任何设备（例如磁盘、SSD、PCIe卡）或者服务（例如对象存储OSS）前都会进行加密，因此实例对应的数据文件和备份都是以密文形式存在的。TDE加密采用国际流行的AES算法。密钥由KMS服务加密保存，RDS只在启动...
数据加密
这些数据库或者表中的数据在写入到任何设备（例如磁盘、SSD、PCIe卡）或者服务（例如对象存储OSS）前都会进行加密，因此实例对应的数据文件和备份都是以密文形式存在的。TDE加密采用国际流行的AES算法。密钥由KMS服务加密保存，RDS只在启动...
XML 类型
xml 数据类型可以被用来存储 XML 数据。它比直接在一个 text 域中存储 XML 数据的优势在于，它会检查输入值的结构是不是良好，并且有支持函数用于在其上执行类型安全的操作。使用这种数据类型要求在安装时用 configure-with-libxml 选项...
恢复库表
RDS MySQL支持常规和极速级别的库表恢复功能，您可以将指定的库、表按备份集或时间点恢复至原实例或新实例，无需恢复全部数据，可用于误操作后的快速订正，以及分析历史数据等场景。库表恢复模式的区别 库表恢复速度有常规、极速 和极速5...
数据管理服务协议
先使用后付费类数据管理：若您购买以按量付费形式售卖的数据管理，您可先开通、使用服务，阿里云将根据产品类型的不同，以小时、天或月等周期为单位，自动计算上1（壹）个计费周期的实际使用量，并从您的阿里云账户余额中扣减相应的服务...
Tair持久化与备份恢复
数据恢复 从备份集恢复至新实例 Tair 支持从指定的备份集创建新实例，新实例中的数据将和该备份集中的数据一致，可用于数据恢复、快速部署业务或数据验证等场景。通过数据闪回按时间点恢复数据 开启数据闪回功能（基于 AOF）后，在备份文件...
数据集成概述
数据集成是稳定高效、弹性伸缩的数据同步平台，致力于提供复杂网络环境下、丰富的异构数据源之间高速稳定的数据移动及同步能力。使用限制 数据同步：支持且仅支持结构化（例如RDS、DRDS等）、半结构化、无结构化（OSS、TXT等，要求具体同步...
Redis持久化与备份恢复
数据恢复 从备份集恢复至新实例 Redis 支持从指定的备份集创建新实例，新实例中的数据将和该备份集中的数据一致，可用于数据恢复、快速部署业务或数据验证等场景。通过数据闪回按时间点恢复数据 开启数据闪回功能（基于 AOF）后，在备份...
什么是对象存储OSS
阿里云对象存储OSS（Object Storage Service）是一款海量、安全、低成本、高可靠的云存储服务，可提供99.9999999999%（12个9）的数据持久性，99.995%的数据可用性。多种存储类型供选择，全面优化存储成本。OSS具有与平台无关的RESTful API...
创建FTP数据源
通过创建FTP数据源能够实现Dataphin读取FTP的业务数据或向FTP写入数据。本文为您介绍如何创建FTP数据源。背景信息 FTP即文件传输协议。如果您使用的是FTP，在对接Dataphin进行数据开发或将Dataphin的数据写入至FTP的场景中，您需要先完成...
数据探索简介
用户可以对入湖后的数据使用Spark SQL快速的进行数据探索，以便对湖内数据进行审核，质量检查，分类等。支持数据湖内多种存储格式，包括Delta、Hudi、CSV、Parquet、JSON、ORC等数据格式。准备工作 已开通OSS。已开通DLF，并创建了 元数据...
数据可视化概览
基本介绍 基于典型的数据集、图表、仪表盘或大屏三层模型，将数据库表中的数据以各种形式的可视化方式展现出来。您可以将单条SQL数据以折线图、饼图、柱状图、环形图、表格、双轴图、漏斗图等常见图表的形式展现出来。再通过仪表盘或大屏，...
计费常见问题
MaxCompute按量计费模式无自动续费功能，如果业务不再需要使用MaxCompute，您可以删除和释放存储的数据，不会再产生费用。更多删除数据信息，请参见 删除表或MaxCompute项目。MaxCompute服务到期或欠费的情况下，数据存放多久会过期？...
概述
若集群中某些库表的数据几乎没有更新、插入和修改操作，且读取频率非常低，如果您有降本需求，可以使用 PolarDB MySQL版 提供的冷数据归档功能，将这部分数据转存至低成本的OSS上存储，以降低数据存储成本。本章节介绍了冷数据归档方法、...
创建FTP数据源
通过创建FTP数据源能够实现Dataphin读取FTP的业务数据或向FTP写入数据。本文为您介绍如何创建FTP数据源。背景信息 FTP即文件传输协议。如果您使用的是FTP，在对接Dataphin进行数据开发或将Dataphin的数据写入至FTP的场景中，您需要先完成...
离线同步数据质量排查
写端数据一致性排查 数据集成的Writer插件用来将源头读取到的数据写出至数据目标端，每一个目标存储类型都会有对应的Writer插件，Writer插件会根据用户配置的数据写出模式（包括冲突替换策略），使用JDBC或者对应数据源SDK最终将数据提交给...
常见问题
本文介绍购买数据安全中心前的常见...如何满足安全性要求 在获取数据库授权的情况下，数据安全中心会以数据采样的方式进行敏感数据识别，不会对数据库中的数据进行保存。数据安全中心是否支持统一管理跨阿里云账号的数据资源？目前暂不支持。
宽表模型介绍
说明 如果现有业务对数据库的并发读写、扩展性和可用性要求较高，或者需要复杂的数据检索和大数据分析，原有数据架构已不能满足业务需求，您可以将MySQL、Oracle、Kafka、HBase、MaxCompute等数据源的数据迁移到表格存储的数据表中使用。...
存储空间地域属性
✓ ✓ 管理目录 与传统文件系统中的层级结构不同，OSS内部使用扁平结构存储数据。即所有数据均以Object的形式保存在Bucket中。为方便您对Object进行分组并简化权限管理，您可以通过目录的层次来组织Object。✓ ✓ 数据索引 数据索引是OSS...
可视化管理内部表、外部表或视图
背景信息 MaxCompute Studio支持的表或视图操作如下：创建内部表、外部表或视图 修改内部表或外部表 查看内部表、外部表或视图详细信息 清空表数据或删除分区 删除内部表、外部表或视图 创建内部表、外部表或视图 在IntelliJ IDEA界面的...
创建逻辑模型：明细表
明细表用于存储大量能够体现业务活动状况的实际数据或详细数值，是数据聚合后依据某个维度生成的结果表。例如，分析产品销售情况，您可以创建销售明细表，用来存储产品维度（作为外键）、时间维度（作为外键）以及销售总量。本文为您介绍...
基于DLF、RDS或Flink、OSS支持Delta Lake或Hudi存储...
参数 描述 示例 所属数据目录 数据存储的数据库目录。default 数据库名称 目标数据库的名称。dlf_db 数据库描述 目标数据库的描述信息。湖仓一体 选择路径 OSS数据路径。格式为 oss:/名称>/目录名称>。oss:/doc-test-01/datalake/单击 确定...
功能发布记录
本文介绍了表格存储每次发布涉及的功能变更及对应的文档，帮助您了解 表格存储 的发布动态。2023年 2023年12月 功能名称 功能描述 发布时间 发布地域 相关文档 时序分析存储商业化 使用分析存储（Analytical Store）功能，您可以低成本存储...
存储加密
数据存储加密机制如下：MaxCompute以项目为单位，通过KMS加密或解密存储在MaxCompute的数据。KMS生成和管理您的主密钥CMK（Customer Master Key），并保障密钥的安全性。MaxCompute支持的加密算法为AES256、AESCTR和RC4。MaxCompute支持...
存储说明
云盘与本地盘 E-MapReduce集群支持使用以下两种类型的磁盘来存储数据。块存储类型 描述 使用场景 云盘 包括SSD云盘、高效云盘和ESSD云盘。磁盘不直接挂载在本地的计算节点上，而是通过网络访问远端的一个存储节点。每一份数据在后端都有两...
功能支持情况
不适用 存储冗余类型概述 OSS提供本地冗余存储和同城冗余存储两种存储冗余类型，覆盖从单可用区到多可用区的数据冗余机制，以保证数据的持久性和可用性。支持本地冗余存储，不支持同城冗余存储 OSS高防 OSS高防是OSS结合DDoS高防推出的DDoS...
数据容灾
跨区域复制可满足您的以下业务需求：合规性要求：虽然OSS默认对每个存储的对象在物理盘上有多份副本，但合规性要求所规定的数据需要跨一定距离保存一份副本。通过跨区域复制，可以在远距离的OSS数据中心之间复制数据以满足这些合规性要求。...
创建存储过程
调用时，存储过程可选择以输入参数的形式从调用方接收值，并可选择以输出参数的形式向调用方返回值。CREATE PROCEDURE 命令可定义并命名一个将存储在数据库中的独立存储过程。如果包括 schema 名称，则在指定的 schema 中创建存储过程。...
计费常见问题
若您的存储容量超出购买的存储包限额，超出部分将以按量付费的形式进行收费。存储包类型 抵扣对象 云数据库备份存储包 支持抵扣同一账号下云数据库MongoDB备份产生的后付费（按量付费）备份存储费用。支持抵扣同一账号下RDS MySQL云盘实例...
创建Hologres内部表
Hologres可通过DDL方式创建Hologres内部表，也可使用DataWorks提供的可视化方式创建。本文为您介绍如何使用DataWorks可视化方式创建Hologres内部表。前提条件 工作空间已绑定Hologres引擎。详情请参见 绑定Hologres计算引擎。创建表的用户...
- 产品推荐
- 这些文档可能帮助您