为什么云存储网关与OSS上的文件不一致
因此如果设定的反向同步的时间间隔较小，则会触发大量的扫描操作，当执行例如 ls 等元数据操作时会出现卡顿从而影响体验，这种场景下可以考虑采用基于消息通知的极速同步方案替代基于扫描机制的常规反向同步以优化性能。基于消息通知的极速...
通过OAuth认证方式集成Jira工单系统
ARMS告警管理支持通过Jira账号信息或OAuth认证的方式集成Jira工单系统，本文介绍如何通过OAuth认证方式在ARMS告警管理中集成Jira工单系统，使告警在创建时能同时在Jira中创建问题工单，告警状态与工单状态可以实现双向同步。步骤一：配置...
实时同步常见问题
本文为您介绍实时同步的相关问题。文档概述 问题分类 相关文档 实时同步任务配置须知 实时同步任务支持哪些数据源？为什么实时同步任务延迟较大？实时同步任务延迟解决方案 实时同步任务为什么不建议使用公网？实时同步字段格式问题 实时...
MySQL数据源
针对已经XA PREPARE的事务数据，实时同步会将其同步到目标端，如果XA ROLLBACK，实时同步不会针对XA PREPARE的数据做回滚写入的操作。若要处理XA ROLLBACK场景，需要手动将XA ROLLBACK的表从实时同步任务中移除，再添加表后重新进行同步。...
从Consul迁移到MSE Nacos
常见问题 为什么Consul中的实例未被同步到Nacos中？请检查Consul中对应的服务状态健康检查是否通过，同步工具只会同步健康实例的数据。相关文档 如果您想了解更多MSE Sync工具的相关信息和其他迁移支持的注册中心类型，请参见 MSE Sync迁移...
跨可用区容灾（Beta）
跨可用区（AZ）容灾，即在同Region不同可用区部署同构的Hologres容灾实例，如果生产实例所处的地理位置发生自然灾害，或者实例内部出现了故障导致生产实例无法正常对外提供读写服务，那么容灾实例可以切换为生产实例，从而保障业务连续性。...
PolarDB-X 1.0同步至阿里云消息队列Kafka
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
同步Redis后出现数据不一致
如下图：可能原因 单靠 info keyspace 的 expires 来判断数据是否一致会出现偏差。其统计信息的统计值不是精确值，有一定的误差。info keyspace 的输出结果中：keys 表示所有keys的数据量。expires 表示带有过期keys的数据量，包含未过期和...
同步时源库为Redis的注意事项及限制
源库为Redis的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：Redis间的双向同步 Redis间的单向同步 Redis间的双向同步 类型 说明 源库限制 为保障同步质量，DTS会在源库中插入一个前缀为DTS_REDIS_TIMESTAMP_HEARTBEAT的...
MySQL实例间的双向同步
UPDATE更新的记录不完全匹配 UPDATE要更新的记录在同步目标实例中不存在时，DTS会自动转化为INSERT，此时可能会出现唯一键的唯一性冲突。UPDATE要更新的记录出现主键或唯一键冲突。DELETE对应的记录不存在 DELETE要删除的记录在同步的目标...
Oracle同步至Tablestore
Failover：在任务出现异常、内存不足等问题时，会触发Failover自动重启任务，您可以查看任务的Failover历史记录。运行信息：查看当前任务的同步信息。DDL记录：当源端发生DDL时，DDL会被记录到此处。任务重跑 直接重跑：不修改任务配置，...
配置同步任务（新控制台）
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
RDS PostgreSQL同步至RDS MySQL
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
离线同步日志分析
本文为您介绍如何查看离线同步任务执行过程中的日志详情。进入日志详情页 您可以在运维中心或DataStudio界面查看任务运行日志。模块 描述 运维中心 您可以进入 周期实例、测试实例、补数据实例 等页面，通过筛选条件过滤出需要查询的实例，...
常见问题
实时同步中选择单库与选择多库的内存占用模式为什么会有差异？实时同步任务DDL策略都有哪些？实时同步MySQL数据常见问题 实时同步MySQL数据源的数据时，一开始读到数据，一段时间后无法读到数据，怎么处理？实时同步至Oracle、PolarDB、...
从RDS原生实时同步
说明 只有分析引擎CStore的实例才会出现该导航选项。在 引擎详情 页点击 开启引擎内部监控。开通后，根据当前访问IP是否在内部控制台访问白名单内，引擎详情 出现不同的选项。页面出现 内部引擎控制详情 按键，请跳转至 步骤 i。页面出现 ...
一键MaxCompute任务出错恢复
常见的实时任务写入失败场景 场景分类 相关文档 Binlog无丢失场景及全增量同步任务 Binlog无丢失 Binlog有丢失场景及全增量同步任务 Binlog有丢失 Merge任务的报错失败场景及全增量同步任务 Merge任务的报错失败 Binlog无丢失 出现不支持的...
RDS PostgreSQL间的单向同步
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL 仅2020年10月01日后...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
全球多活使用限制
若各子实例的规格不一致，可能会出现性能或容量问题。一个分布式实例中最多可包含三个子实例，且各子实例不能位于同一可用区。第一个子实例支持从已创建的实例进行转换，第二、第三个子实例需新购。一个分布式实例中的子实例必须都在中国...
全球多活使用限制
若各子实例的规格不一致，可能会出现性能或容量问题。一个分布式实例中最多可包含三个子实例，且各子实例不能位于同一可用区。第一个子实例支持从已创建的实例进行转换，第二、第三个子实例需新购。一个分布式实例中的子实例必须都在中国...
自建SQL Server同步至云原生数据仓库 AnalyticDB ...
当超出数量限制，会出现稳定性和性能问题的风险，此时建议您拆分待同步的表，分批配置任务。DTS是用fn_log函数获取源库日志，而该函数有一定的性能瓶颈，请不要过早清理源库日志，否则可能会导致任务失败。数据日志：需开启，备份模式设置...
【邀测】同步备份
本文介绍同步备份功能，同步备份是一项方便、高效的云存储功能，支持 云与本地数据双向实时同步，实现多终端设备数据保持最终一致。功能特点 云-端数据双向同步：在本地存储和编辑的最新文件/文件夹实时同步至云端，云端已上传及更新的文件...
同步方案选取指南
当您在使用关系型数据库（RDS）遇到查询慢的问题时，可将RDS中的数据同步至阿里云Elasticsearch进行查询分析。阿里云Elasticsearch是一个基于Lucene的实时分布式的搜索与分析引擎，可近乎于准实时地存储、查询和分析超大数据集。您可以通过...
动态修改schema
切换提醒 如果在灰度索引的同步进度落后于源索引时将流量切到灰度索引，则可能会出现查询数据回退。此时表格存储会通过源索引和灰度索引的同步状态和最后同步时间，判断“是否可以安全切换”。当出现如下情况时，表格存储会判断为 可安全...
2019年
在您评估附加列和目标表中已有的列是否会出现名称冲突后，可选择是否启用新版附加列命名规则。修改数据同步的附加列规则 2019年9月 支持迁移RDS MariaDB、PolarDB O引擎集群、SQL Server 2017。支持的数据库 支持全量迁移性能监控功能，为...
钉邮绑定和通讯录同步
4）邮箱管理后台，组织与用户-邮箱管理，会出现 服务邮箱 和 进入钉钉管理后台 的功能选项。服务邮箱：一般适用于只有邮箱账号但是没有钉钉账号的用户如公共账号，所以此处服务邮箱是专门用于创建邮箱侧独立使用的账号。进入钉钉管理后台：...
配置变更
勾选需要变更的订阅关系，选定的消息订阅会出现在变更列表中，单击 修改 进行配置调整，或单击 删除，然后单击 保存 完成修改或删除。同步和生效消息配置 单击消息配置页面右下角的 同步，将消息类型和订阅变更同步到当前的工作空间，避免...
OTSStreamReader常见问题
此时会出现“源表中您配置的列数是：6 大于目的端的列数是：4”错误。当在同步脚本中配置了"mode":"single_version_and_update_only"（即为列模式同步）时，请检查OTSStreamReader中的parameter.column和Writer中的parameter.column配置列...
步骤七：故障切换
故障切换类型 数据同步后切换 该故障切换会先停止保护组中被保护的实例，并且等到所有被保护的实例停止后再进行最后一轮数据同步，等待数据同步完成后再启动切换。这样可以保证容灾端与生产端数据完全一致，无数据丢失。该切换模式适用于...
步骤七：故障切换
故障切换类型 数据同步后切换 该故障切换会先停止保护组中被保护的实例，并且等到所有被保护的实例停止后再进行最后一轮数据同步，等待数据同步完成后再启动切换。这样可以保证容灾端与生产端数据完全一致，无数据丢失。该切换模式适用于...
不同库名间的数据同步或迁移
数据传输服务DTS（Data Transmission Service）支持在配置数据同步或迁移任务时对数据（库、表、列）的名称进行映射，以设置任务对象在目标库实例中的名称。您可以通过该功能将数据同步或迁移到目标库中指定的数据库、数据表或字段（列），...
通过MySQL分析实例同步至数仓版
MySQL分析实例简介 应用场景 随着企业业务发展，精细化实时运营诉求越来越强烈，RDS MySQL用户经常会遇到以下问题：进行复杂分析查询时，经常会出现查询卡顿。只读实例只能分担读压力，无法从根本上解决复杂分析慢的问题。构建实时数仓成本...
数据库代理常见问题
如果您在使用RDS MySQL数据库代理过程中存在疑问或遇到问题，可以参考本文查看解决方案。目录 什么是数据库代理？通用型代理和独享型代理有什么区别？数据库代理是否占用主实例的QPS或者TPS？数据库代理地址和常规地址是否是一个地址？开通...
修改持久内存型实例的同步模式
当备实例不可用或者主备实例间出现网络异常时，半同步会退化为异步。异步（默认）：使用Redis原生异步复制。退化阈值 仅 半同步 支持配置该参数，单位为ms，取值范围为10~60000，默认为500。当同步延迟超出该阈值时，同步模式 会自动转为 ...
修改持久内存型实例的同步模式
当备实例不可用或者主备实例间出现网络异常时，半同步会退化为异步。异步（默认）：使用Redis原生异步复制。退化阈值 仅 半同步 支持配置该参数，单位为ms，取值范围为10~60000，默认为500。当同步延迟超出该阈值时，同步模式 会自动转为 ...
全增量数据同步
本文主要介绍全增量数据同步的使用场景，功能列表，迁移优势，使用限制以及创建数据同步任务等操作。使用场景 大版本升级：HBase1.x升级HBase2.x。跨地域迁移：例如从青岛机房迁移到北京机房。跨账号迁移：支持不同账号迁移数据。集群升配...
自建PostgreSQL同步至PolarDB PostgreSQL版（兼容...
类型 说明 源库限制 待同步的表需具备主键或唯一约束，且字段具有唯一性，否则可能会导致目标数据库中出现重复数据。若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置...
PolarDB MySQL版间的单向同步
如果数据同步的源库没有主键或唯一约束，且记录的全字段没有唯一性，可能会出现重复数据。建议源和目标 PolarDB MySQL版 集群的数据库版本保持一致，或者从低版本同步到高版本以保障兼容性。费用说明 同步类型 链路配置费用 库表结构同步和...
离线同步并发和限流之间的关系
在一些数据同步场景，脏数据的出现会导致任务同步效率下降，以关系数据库写出为例，默认是执行batch批量写出模式，在遇到脏数据时会退化为单条写出模式（以找出batch批次数据具体哪一条是脏数据，保障正常数据正常写出），但单条写出效率会...
- 产品推荐
- 这些文档可能帮助您