业务切换流程
Redis CLIENT LIST MongoDB use admin db.runCommand({currentOp:1,$all:[{"active":true}]})说明 上述语句查询到的进程或会话信息中，包含DTS连接源数据库的进程或会话。等待迁移任务的 增量迁移 再次进入 无延迟 状态，保持1分钟或以上，...
业务切换流程
Redis CLIENT LIST MongoDB use admin db.runCommand({currentOp:1,$all:[{"active":true}]})说明 上述语句查询到的进程或会话信息中，包含DTS连接源数据库的进程或会话。等待迁移任务的 增量迁移 再次进入 无延迟 状态，保持1分钟或以上，...
基本概念
说明 为保证数据一致性，建议迁移期间不要往源数据库中写入新的数据。如需实现不停机迁移，您需要在配置数据迁移任务时，同时选择结构迁移、全量数据迁移和增量数据迁移。增量数据迁移 在增量数据迁移阶段，DTS会将源库产生的增量数据实时...
从自建Db2迁移至RDS MySQL
说明 如果未勾选 增量数据迁移，为保障数据一致性，数据迁移期间请勿在Db2数据库中写入新的数据。迁移对象 在 迁移对象 框中单击待迁移的对象，然后单击 图标将其移动到 已选择对象 框。说明 迁移对象选择的粒度可以为库、表、列三个粒度。...
将ECS上单节点或副本集架构的自建MongoDB迁移上云
说明 为保障数据一致性，全量数据迁移期间请勿在自建MongoDB数据库中写入新的数据。如果需要进行不停机迁移，则同时选择 全量数据迁移 和 增量数据迁移。说明 单节点架构的自建MongoDB数据库，须提前开启oplog才可以使用增量数据迁移功能，...
华为云云数据库RDS MySQL迁移到阿里云
注意事项 对于七天之内的异常迁移任务，DTS会尝试自动恢复，可能会导致迁移任务的源端数据库数据覆盖目标实例数据库中写入的业务数据，迁移任务结束后务必将DTS访问目标实例账号的写权限用 revoke 命令回收掉。操作步骤 登录 DTS控制台。在...
从MongoDB副本集实例迁移至分片集群实例
迁移类型说明 迁移类型 说明 全量数据迁移 将源MongoDB数据库迁移对象的存量数据全部迁移到目标MongoDB数据库中。说明 支持迁移database、collection和index。增量数据迁移 在全量迁移的基础上，将源MongoDB数据库的增量更新数据同步到目标...
从MongoDB副本集实例迁移至分片集群实例
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问；如果源或目标数据库是IDC自建数据库或其他云数据库，则需要您手动添加对应地区DTS服务的IP地址...
同步数据
通过 分析型数据库MySQL版 client 高效率的写入数据到数据库中。通过 ADB uploader 将本地数据导入到数据库中。通过DML（INSERT 和 DELETE）命令加载数据到分析型数据库MySQL版中。如果数据在数据库其它表中已经存在，可以使用 INSERT ...
INSERT INTO
如果在您的写入数据中包含多个月份的混合数据时，将会显著地降低INSERT的性能。为了避免这种情况，通常采用以下方式：数据总是以尽量大的batch进行写入，如每次写入100,000行。数据在写入ClickHouse前预先对数据进行分组。在以下的情况下，...
通过DTS实现数据库的垂直拆分
由于 简易拆分方案 需要短暂暂停业务并暂停向数据库写入数据，请选择业务低峰期操作以降低程序变更发布、切换实例过程中对业务的影响。双写方案 说明 可以实现业务的灰度切流，最大限度保证业务不受影响，但您需要先改造业务的应用程序，使...
连续查询
创建数据库db_sensor_month，将原始数据存储在db_sensor_month中，数据有效期为30天。CREATE DATABASE db_sensor_month WITH(ttl=30);在数据库db_sensor_month中创建表sensor。USE db_sensor_month；CREATE TABLE sensor(device_id VARCHAR...
CREATE CONTINUOUS QUERY
示例 以下示例创建了一个持续查询：每小时计算过去两个小时内原始时序表 sensor 中的每小时平均温度和每小时平均湿度，并将数据写入数据库 default 中的表 sensor 中。CREATE CONTINUOUS QUERY `default`.`my_cq` WITH(`INTERVAL`='1h',`...
数据存储
时序数据存储 时序数据库对时序数据的写入、聚合以及检索都做了特定优化，AnalyticDB采集到的时序数据主要存在时序数据库中。目前每个AnalyticDB实例有一个独立的时序数据库进行服务，只保存当前AnalyticDB实例的时序数据。日志数据存储 ...
FTP Check节点
背景信息 FTP Check节点的典型应用场景：当DataWorks调度系统中的任务需要访问一个外部数据库时，但由于该数据库的相关数据写入任务不在DataWorks中，DataWorks无法知道该数据库何时完成写入任务并可以被访问。如果DataWorks读取未写入完成...
读写AnalyticDB for PostgreSQL数据
语法示例3 msck repair database dla_adbpg_db 如果AnalyticDB for PostgreSQL中的表数据太大或者无法确认AnalyticDB for PostgreSQL的对应数据库中有哪些表时，您可以在DLA中执行以下SQL命令自动识别AnalyticDB for PostgreSQL对应数据库...
云数据库MongoDB版（分片集群架构）同步至云数据库...
如需清理数据库中多个集合的孤立文档，您可以修改 fullCollectionName 参数并多次执行，也可以自行修改脚本通过遍历的方式执行。function cleanupOrphanedOnShard(shardName,fullCollectionName){ var nextKey={ };var result;while...
开发限制
数据库中最多支持增加的计算节点个数 一次性默认最多支持增加99个节点，如需添加更多，请联系阿里云技术支持。数据库中最多支持增加的存储节点个数 SQL语法使用限制 SQL语法 操作 使用约束 自定义操作 自定义函数 支持。自定义类型 暂不...
USE
目标数据库（database_identifier）database_identifier必须是当前实例中已存在的数据库。您可以通过 SHOW DATABASES 语法查看当前实例下所有的数据库。SHOW DATABASES 的使用方式，请参见 SHOW DATABASES。默认数据库（DEFAULT）USE语句中...
常见问题
支持的数据库部署位置（接入方式）阿里云实例 有公网IP的自建数据库 通过数据库网关DG接入的自建数据库 通过云企业网CEN接入的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能接入网关接入的自建数据库 阿里云实例 通过数据库网关DG接...
CREATE EXTERNAL DATABASE
AnalyticDB MySQL 湖仓版（3.0）和 数仓版（3.0）支持通过 CREATE ...语法 CREATE EXTERNAL DATABASE[IF NOT EXISTS]<db_name>参数 db_name：外部数据库名。数据库名命名规则，请参见 命名约束。示例 CREATE EXTERNAL DATABASE adb_demo;
云数据库MongoDB版（分片集群架构）同步至云数据库...
如需清理数据库中多个集合的孤立文档，您可以修改 fullCollectionName 参数并多次执行，也可以自行修改脚本通过遍历的方式执行。function cleanupOrphanedOnShard(shardName,fullCollectionName){ var nextKey={ };var result;while...
基础版Spark全密态计算引擎使用示例
数据准备 本文示例的RDS MySQL数据库名为 adb，并在该库中创建了一张名为 customer 的表，示例如下：CREATE DATABASE IF NOT EXIST adb;CREATE TABLE IF NOT EXISTS adb.customer(id int,name varchar(1023),address varchar(1023),age int...
如何清理孤立文档
如需清理数据库中多个集合的孤立文档，您可以修改 fullCollectionName 参数并多次执行，也可以自行修改脚本通过遍历的方式执行。function cleanupOrphanedOnShard(shardName,fullCollectionName){ var nextKey={ };var result;while...
通过Mongo Shell管理数据库账号
roles":[{"role":"readAnyDatabase","db":"admin"}]} 查询目标数据库的所有数据库账号 说明 您可以通过 use database_name 命令切换数据库，其中 database_name 为目标数据库的名称。方式一：在目标数据库执行查询命令。show users 说明 ...
新建 TiDB 数据源
重要 您在 TiDB 数据库中配置的待订阅库表，需要和数据传输的数据迁移项目中配置的库表名保持一致。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建...
创建数据库和集合并写入数据
本文以DMS（Data Management Service）为例，介绍如何在云数据库MongoDB中创建数据库和集合并写入数据。前提条件 已完成快速入门的如下步骤：创建单节点实例（可选）重置密码 设置白名单 通过DMS连接MongoDB单节点实例（可选）创建数据库...
将OSS数据写入AnalyticDB for MySQL 3.0
写入数据 异步执行以下SQL将OSS table目录下dla_table_1文件中的数据写入AnalyticDB for MySQL adb_demo数据库的shipping表。执行 OSS 到 AnalyticDB for MySQL 的全量数据写入。run-async=true*/INSERT INTO ads_database_schema.shipping...
创建数据库和集合并写入数据
本文以DMS（Data Management Service）为例，介绍如何在云数据库MongoDB中创建数据库和集合并写入数据。前提条件 已完成快速入门的如下步骤：创建分片集群实例（可选）重置密码 设置白名单 通过DMS连接MongoDB分片集群实例（可选）创建数据...
Azure Cosmos DB API for MongoDB迁移至阿里云
使用MongoDB数据库自带的备份还原工具，您可以将Azure Cosmos DB API for MongoDB迁移至阿里云。注意事项 该操作为全量迁移，为避免迁移前后数据不一致，迁移开始前请停止数据库写入。如果您之前使用 mongodump 命令对数据库进行过备份操作...
Microsoft Azure Database for MySQL数据库迁移到阿里...
本文介绍Microsoft Azure Database for MySQL数据库迁移到阿里云的步骤及注意事项。前提条件 源端及目标端 要求 相关参考 源端 Microsoft Azure Database for MySQL实例 已开通公网访问，并获取外网连接地址及端口。已创建高权限账号。如果...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
如何将一棵LSM-Tree塞进NVM
全持久化 Low Fast 持久化索引的更新以及添加操作通常涉及PM中多个超过8字节的小的随机写入，因此引入用于维护一致性的开销以及随机写入导致的写放大问题。无持久化是指将PM当作DRAM使用，此种方法可以保证索引处于最高的性能，但掉电数据...
创建数据库和集合并写入数据
本文以DMS（Data Management Service）为例，介绍如何在云数据库MongoDB中创建数据库和集合并写入数据。前提条件 已完成快速入门的如下步骤：创建副本集实例（可选）重置密码 设置白名单 通过DMS连接MongoDB副本集实例（可选）创建数据库...
RDS SQL Server中无法直接删除数据库的处理方法
问题描述 在RDS SQL Server实例中删除数据库时，会出现以下场景的报错：如果数据库没有会话，对于RDS SQL Server 2008、2012和2016版，是用镜像做的主备同步，直接使用 drop database SQL语句删除数据库会存在以下报错。The database 'XX' ...
创建数据库用户
您在使用数据传输的数据迁移和数据同步功能前，请先在源端和目标端数据库中，为数据迁移或同步任务创建专用的数据库用户。OceanBase 数据源 创建 OceanBase 数据库用户 此处创建的 OceanBase 数据库用户，用于创建 实例类型 为 VPC 内自建...
ALTER DATABASE
ALTER DATABASE 更改一个数据库的属性。简介 ALTER DATABASE 更改一个数据库的属性。第一种形式更改某些针对每个数据库的设置。只有数据库拥有者或者超级用户可以更改这些设置。第二种形式更改数据库的名称。只有数据库拥有者或者超级用户...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
C100售前支持相关问题
数据库审计和其他产品的区别 数据库审计产品相对于自己安装Packetbeat抓取流量审计和RDS数据库自带的SQL洞察功能，有以下区别：支持的数据库协议：数据库审计产品是专注于数据库协议解析的，支持的数据库协议更丰富，解析的粒度更细。...
使用须知
Namespace：与数据库中的Database或者Schema相对应。Table：与数据库中的表相对应。了解Lindorm计算引擎SQL 根据您已开通的引擎类型（即宽表引擎、时序引擎、搜索引擎或者文件引擎等），Lindorm计算引擎为您新增对应的数据源（Catalog）。...
- 产品推荐
- 这些文档可能帮助您