生命周期管理FAQ
目标目录的所有文件数据只要满足生命周期管理策略，即会自动转储至低频存储或归档存储中。设置生命周期管理策略后，文件多久会被转储到低频存储或归档存储？转储时间会和文件系统的大小和转储数据量有关，功能开启后，符合生命周期管理策略...
Tunnel命令
返回结果+-+-+-+-+-+|shop_name|customer_id|total_price|sale_date|region|+-+-+-+-+-+|shopx|x_id|300.0|201312|hangzhou|shopy|y_id|400.0|201312|hangzhou|+-+-+-+-+-+-rd 指定本地数据文件的行分割符。默认值为 \r。s 指定是否扫描...
Tunnel命令
返回结果+-+-+-+-+-+|shop_name|customer_id|total_price|sale_date|region|+-+-+-+-+-+|shopx|x_id|300.0|201312|hangzhou|shopy|y_id|400.0|201312|hangzhou|+-+-+-+-+-+-rd 指定本地数据文件的行分割符。默认值为 \r。s 指定是否扫描...
概览
操作审计 DMS的操作日志中保存了所有数据查询和变更记录，您可随时查询数据库的操作记录、操作人、操作时间等信息。数据安全解决方案 数据作为企业的核心资产，数据安全是企业管理的重中之重。在传统解决方案中，存在如下问题：大量开发...
Tunnel操作
数据文件的保存路径有两种选择：您可以将文件直接下载至MaxCompute客户端的 bin 目录中，此时 path 需要设置为 文件名.后缀名；也可以将文件下载至其他路径下，例如D盘的test文件夹，path 需要设置为 D:\test\文件名.后缀名。使用示例 示例...
COMPACTION
Compaction可以把所有的数据文件按照一定策略进行Merge操作，可提升查询效率。功能介绍 Delta Table支持近实时增量写入和time travel查询特性，在数据频繁写入的场景中，必然会引入大量的小文件，需要设计合理高效的合并策略来对小文件进行...
什么是数据安全中心
数据安全中心DSC（Data Security Center），在满足等保2.0“安全审计”及“个人信息保护”的合规要求的基础上，为您提供敏感数据识别、数据安全审计...重要 DSC 仅对数据进行敏感数据分级、打标和敏感数据检测，不会对您的数据文件进行保存。
通用云盘数据归档功能
数据归档至OSS端时会将ESSD中的表切分为若干个数据文件块上传，每个数据文件块对应的表空间、数据范围等信息保存在归档数据控制块中。控制块保存在内存中，用于快速定位归档数据请求的数据位点，并通过LRU算法进行缓存控制。innodb_oss_...
企业版产品系列
集群中所有的数据文件都存放在共享存储（PolarStore）中，各个主节点通过分布式文件系统（PolarFileSystem）共享底层存储（PolarStore）中的数据文件。用户可以通过集群地址访问整个集群，数据库代理会自动转发SQL命令到正确的主节点。多主...
如何迁移到DBFS？
本文档主要为您说明在使用阿里云数据库存储DBFS时，如何方便的将数据库迁移到DBFS上。一般存在以下几种常用的方式：主备同步：搭建主备库，通过binary log同步...停机拷贝：停掉数据库服务，将数据库所有文件拷贝到DBFS，再拉起数据库服务。
功能特性
分区表实际就是对应分布式文件系统上的独立的文件夹，一个分区对应一个文件夹，文件夹下是对应分区所有的数据文件。分区表 外部表 OSS外部表 可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据，或将MaxCompute项目中的数据写入...
Amazon Redshift数据迁移至MaxCompute
如果源数据地址设置了前缀，例如源数据地址前缀为 data/to/oss/，则需要使用^data/to/oss/file.*来匹配指定前缀下以 file 开头的所有文件。picture/.*表示匹配某一级为 picture 的子目录。重要 当过滤规则为包含时，符合规则的文件都会被...
迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle ...
Oracle 数据库的归档文件保存 2 天以上，否则由于某个时间段归档量陡增等情况，准备恢复时没有了归档文件，将无法恢复。Oracle 数据库的增量日志解析最大支持 5T/天。OceanBase 数据库 Oracle 租户至 Oracle 数据库 12C 及之后版本的反向...
备份下载的常见问题
RDS实例 基本信息 页面显示的 存储空间 大小为所有数据、系统文件、备份数据等的总和。因此存储空间数据量不等于下载的备份文件数据量。说明 如需扩容或释放实例存储空间，请参见 存储空间的常见问题。MySQL自建数据库的备份文件如何恢复或...
备份下载的常见问题
RDS实例 基本信息 页面显示的 存储空间 大小为所有数据、系统文件、备份数据等的总和。因此存储空间数据量不等于下载的备份文件数据量。说明 如需扩容或释放实例存储空间，请参见 存储空间的常见问题。MySQL自建数据库的备份文件如何恢复或...
备份下载的常见问题
RDS实例 基本信息 页面显示的 存储空间 大小为所有数据、系统文件、备份数据等的总和。因此存储空间数据量不等于下载的备份文件数据量。说明 如需扩容或释放实例存储空间，请参见 存储空间的常见问题。MySQL自建数据库的备份文件如何恢复或...
查看快照容量
本文为您介绍如何查看单个数据库文件系统所有快照的容量。前提条件 您已经为某个文件系统至少创建过一份快照。具体操作，请参见 创建快照。根据快照链查看快照容量 快照链是一个数据库文件系统中所有快照组成的关系链，一个文件系统对应一...
Data Exchange数据集用于数据标注
点击提交，数据应用功能会保存manifest标注数据文件到指定位置，并创建PAI-iTAG数据集，创建成功后跳转到PAI-iTAG的数据集管理页面。说明 PAI-iTag当前支持图像类（jpg/cur/webp/png/svg/gif/bmp/jpeg/ico/web）、视频类（mp4）、音频类...
数据下载
在DataWorks的数据开发（DataStudio）、数据分析、安全中心模块下载的CSV、XLSX格式文件数据将同步保存至数据下载功能。通过该功能，您可将所需历史下载文件重新下载至本地使用，也可追溯历史下载记录的操作详情。前提条件 已通过如下模块...
API概览
ListAutoSnapshotPolicyUnappliedDbfs 列出未设置自动快照策略的文件系统 查询您在某个地域下，所有已创建的符合查询条件的未设置自动快照策略的数据库文件系统。ListAutoSnapshotPolicyAppliedDbfs 列出该自动快照策略已设置的文件系统 ...
COPY
可以被用来转储一个继承层次中的所有数据。你必须拥有被 COPY TO 读取的表上的选择特权，以及被 COPY FROM 插入的表上的插入特权。拥有在命令中列出的列上的特权就足够了。如果对表启用了行级安全性，相关的 SELECT 策略将应用于 COPY ...
系统配置
数据保护伞的系统配置，支持设置数据水印文件的保存时间、设置是否展示MaxCompute数据的风险识别等级、设置告警信息的接收地址，以及设置是否开启实时识别敏感数据，您可根据业务需要进行配置。进入系统配置页面 进入数据开发页面。登录 ...
使用案例
说明 由于数据本身含有引号和逗号等字符，因此此处使用非标准字符 E'\x01' 作为引号，E'\x02' 作为分隔符，确保文件中的所有数据都能被正确解析而不产生歧义。创建wiki表。CREATE TABLE wiki(id SERIAL PRIMARY KEY,url TEXT,title TEXT,...
GetSnapshotLink-获取单个快照链
快照链是一个数据库文件系统所有快照组成的关系链，一个文件系统对应一条快照链。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂...
TSDB全量迁移至时序引擎
迁移流程 TSDB全量迁移至Lindorm时序引擎的迁移流程如下：通过时序数据迁移工具读取TSDB所有的时间线数据，并将数据保存至本地文件。根据迁移任务配置（指定开始时间、结束时间和时间切分周期）将迁移任务划分成多个时间分组。按照迁移任务...
功能特性
功能 功能描述 参考文档 DBFS特性 原子写 支持DIRECT IO的原子写，需按4K，8K，16K对齐-共享读写 一份数据可共享式多点挂载并进行读写，读写可线性扩展-存储加密 通过对数据库文件存储实施加密，可以确保数据库文件存储上的所有数据（包括...
创建并管理电子表格
进行数据分析前，您需要先创建用于承载目标数据的电子表格。本文为您介绍如何创建、查看和管理电子表格。进入电子表格 您可以通过如下两种方式进入：在 数据分析 首页的 快捷入口 区域，单击 电子表格 模块图标进入 电子表格 页面。在 数据...
使用SQL分析连接
重要 我们一贯重视您的系统数据安全，每次打开页面，系统尝试读取您本地文件夹的时候，需要您进行手动授权，让我们有权限访问您指定文件夹下的所有文件。同时我们不会在服务器中保存您文件夹下的内容。公共数据集DEMO MaxCompute SQL分析...
异构数据源访问
准备测试数据集 准备测试数据集，并执行 hadoop fs-put 本地文件名称 文件保存在Hadoop集群的路径 命令将数据集保存在Hadoop集群路径。例如，将本地文件/home/user/file.txt 上传到HDFS的/tmp 目录下，执行 hadoop fs-put/home/user/file....
高级管理
即仅支持修改同一地域所有数据库的日志保存时间，不支持修改某一数据库的日志保存时间。修改日志保存时间 开启SQL日志审计 后，在当前页面右上角单击高级管理跳转到日志服务控制台。单击Project名称。在左侧日志库中单击日志库名称，单击，...
解决SQL Server实例空间满自动锁的问题
方法二：通过SQL语句查看所有数据库的数据文件（mdf和ndf文件）和日志文件（ldf文件）的大小，详情请参见 RDS for SQL Server如何查看实例、数据库及表占用的空间大小。解决空间满自动锁问题 升级实例的存储空间 升级实例存储空间后即可...
解决SQL Server实例空间满自动锁的问题
方法二：通过SQL语句查看所有数据库的数据文件（mdf和ndf文件）和日志文件（ldf文件）的大小，详情请参见 RDS for SQL Server如何查看实例、数据库及表占用的空间大小。解决空间满自动锁问题 升级实例的存储空间 升级实例存储空间后即可...
导入数据至电子表格
选择本地需要导入的Excel文件，单击 选择文件（.xlsx），导入Excel文件中的所有Sheet数据至电子表格，并且支持选定某个Sheet进行导入。电子表格 在 导入 对话框中，单击 电子表格，配置各项参数，单击 确认。参数 描述 电子表格 从 电子...
整体流程介绍
本文介绍将数据文件导入至图数据库GDB实例中的前提条件及操作流程。前提条件 已创建图数据库GDB实例，创建方法请参见 创建实例。已创建Bucket，创建方法请参见 创建存储空间。说明 如果是在对象存储OSS控制台创建，必须与已创建的图数据库...
使用AOF文件进行迁移
redis-cli是原生Redis的命令行工具，您可以使用redis-cli将自建Redis中已保存至AOF文件的数据迁移到 云数据库 Tair（兼容 Redis）。本方案具有灵活、高效与自动化等特点，可保障数据的一致性与完整性，但本方案不支持实时同步，仅支持迁移...
数据量
在数据库备份场景下，有4个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。数据量 说明 数据库磁盘空间 由数据库的数据文件空间、数据库的日志文件空间、操作系统文件空间和空闲空间组成。说明 RDS中为：购买时选择的存储...
快照链
快照链是一个数据库文件系统中所有快照组成的关系链。一个数据库文件系统（以下简称文件系统）对应一条快照链，快照链有以下信息：快照容量：快照链中所有快照占用的存储空间。快照个数：文件系统当前快照数量。每个文件系统最多只能创建...
通过外表导入至数仓版
如果您需要将 OSS 中的数据导入至 云原生数据仓库 AnalyticDB MySQL 版，可以参考本文档，通过外表导入方式将 OSS 中Parquet、CSV和ORC格式的数据文件导入至 数仓版。前提条件 AnalyticDB for MySQL 集群的产品系列为 数仓版。说明 数仓版...
TableTunnel
session.commit()将相应数据目录下的所有文件移到相应表所在目录，并更新表Meta，即数据进表。使数据对其它MaxCompute任务（例如SQL、MapReduce）可见。TableTunnel接口限制 Block ID的取值范围是[0,20000)，单个Block上传的数据限制为100...
导入数据并查询
说明 若指定为源数据文件夹的路径，成功创建外表后，外表中的数据为该文件夹下的所有数据。模糊查询：oss:/bucket-name/adb_data/list_file_with_prefix/test*。说明 该模糊查询示例将匹配到满足前缀条件的所有文件和文件夹，例如：oss:/...
- 产品推荐
- 这些文档可能帮助您