设置数据同步
平台不再提供开启HTTP方式同步数据，统一通过HTTP/2方式或AMQP方式（推荐使用）同步设备数据和用户数据。当前已使用HTTP方式推送的客户不受影响，可继续使用，但一旦关闭后则没法再次开启。当前已同时使用HTTP与HTTP/2方式分别推送用户数据...
数据同步集成流程指导
IDaaS钉钉同步数据到IDaaSLDAP 数据同步到IDaaSIDaaS 数据同步API 标准Excel 表格导入到IDaaSIDaaS 同步至 SPIDaaS 数据同步到RAMIDaaS 数据同步到钉钉IDaaS 数据同步到LDAP数据同步 SCIM 标准IDaaS Excel 表格导出IDaaS 同步的数据有哪些...
数据迁移、同步和恢复区别
对于数据复制需求，很容易混淆数据迁移、同步和恢复这三个概念，本文介绍这三个概念的...它属于持续性任务，任务创建后会一直同步数据，保持数据源和数据目标的数据一致性。icmsDocProps={'productMethod':'created','language':'zh-CN',};
接入 Android
实现类中收到数据后，调用该接口通知数据同步服务端接收同步数据成功。在没有收到 reportMsgReceived 前，数据同步会重试投递，重试 6 次之后数据会被永久删除。isConnected()用于检查当前数据同步服务是否正常。代码示例该示例通过在 10.1...
概述
背景信息面对各行各业对大数据的应用，数据集成会有很多的诉求，包括能够简单高效的配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优（例如容错，限速，并发）等。...
什么是数据传输服务DTS
功能特性功能介绍相关文档数据同步实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。同步方案概览数据同步功能特性数据迁移实现同构和...
DataX同步数据
MySQL数据库为例，为您介绍基于Dataphin如何调用DataX同步数据。前提条件 已开通RDS MySQL实例，且RDS MySQL实例的网络类型为专有网络。如何开通RDS MySQL实例，请参见创建RDS MySQL实例。已创建RDS MySQL实例的数据库和账号，创建过程中...
概述
如果您是在2020年4月之后购买的Dataphin，则数据同步能力通过数据集成功能实现（即系统不再提供数据同步的功能入口）。数据集成为您提供简单高效、安全可靠的数据同步平台。数据同步支持通过界面配置及编写代码的方式构建同步任务，以满足...
入仓解决方案
根据所需的同步效率、同步数据量需求，创建入仓解决方案同步线上库数据。入仓解决方案包括： 实时同步任务：基于离线数据集成的数据传输服务。新建实时同步任务，请参见新建实时同步任务。实时迁移任务：基于数据传输服务DTS的数据传输服务...
MySQL分析实例简介
自动同步数据 MySQL分析实例内置DTS，创建成功后自动进行数据同步。完整的OLTP+OLAP解决方案，产品级别深度融合。MySQL分析实例和RDS MySQL相比，有以下优势：复杂分析型SQL查询性能约为MySQL的10倍以上。具有承载更大吞吐数据实时写入和...
Oracle Reader
切分因子，可以配置同步数据的切分份数，如果配置了多并发，会按照并发数* splitFactor份来切分。例如，并发数=5，splitFactor=5，则会按照5*5=25份来切分，在5个并发线程上执行。说明 建议取值范围：1～100，过大会导致内存溢出。否 5 ...
Redis全球多活简介
实现同一个分布式实例下的子实例双向数据同步，可应用于数据分析或测试等场景。费用说明 创建分布式实例不产生费用，仅会对分布式实例中的子实例收费（与普通Redis实例收费标准一致），详情请参见计费项。支持的产品系列 内存型（本地盘版...
配置ClickHouse输入组件
同步ClickHouse数据源的数据至其他数据源的场景中，您需要先配置ClickHouse输入组件读取的数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置ClickHouse输入组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源...
Tair全球多活简介
实现同一个分布式实例下的子实例双向数据同步，可应用于数据分析或测试等场景。费用说明 创建分布式实例不产生费用，仅会对分布式实例中的子实例收费（与普通Tair实例收费标准一致），详情请参见计费项。支持的产品系列 内存型（本地盘版）...
产品优势
您可以使用该工具实现MongoDB数据库间的数据同步，详情请参见使用MongoShake实现MongoDB副本集间的单向同步 NimoFullCheck 用于检验源端DynamoDB和目的端MongoDB数据一致性的工具。您可以使用该工具检验DynamoDB和阿里云数据库之间迁移数据...
配置Impala输入组件
同步Impala数据源的数据至其他数据源的场景中，您需要先配置Impala输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Impala输入组件。前提条件 已创建Impala数据源，如何创建，请参见创建Impala数据源。进行Impala...
配置TiDB输入组件
同步TiDB数据源的数据至其他数据源的场景中，您需要先配置TiDB输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置TiDB输入组件。前提条件 已创建TiDB数据源，如何创建，请参见创建TiDB数据源。进行TiDB输入组件属性...
配置KingbaseES输入组件
同步KingbaseES数据源的数据至其他数据源的场景中，您需要先配置KingbaseES输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置KingbaseES输入组件。前提条件 已创建KingbaseES数据源，如何创建，请参见创建...
配置GoldenDB输入组件
同步GoldenDB数据源的数据至其他数据源的场景中，您需要先配置GoldenDB输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置GoldenDB输入组件。前提条件 已创建GoldenDB数据源，如何创建，请参见创建Golden DB数据源。...
配置MySQL输入组件
同步MySQL数据源的数据至其他数据源的场景中，您需要先配置MySQL输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置MySQL输入组件。操作步骤 请参见配置离线单条管道，进入离线管道脚本的开发页面。按照下图指引，...
配置数据同步任务
说明 源和目标RDS MySQL实例可以不同或相同，即您可以使用DTS实现两个RDS MySQL实例间的数据同步或同一RDS MySQL实例内的数据同步。数据库账号 填入源RDS MySQL实例的数据库账号，需具备待同步对象的读权限。数据库密码 填入该数据库账号...
2021年
本章节介绍了2021年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。更多新功能介绍 详情请参见数据传输服务产品动态。2021年12月 类型 重点内容 相关文档 新增 在PolarDB O引擎迁移至自建Oracle的场景中，支持...
配置GBase 8a输入组件
GBase 8a输入组件用于读取GBase 8a数据源的数据。同步GBase 8a数据源的数据至其他数据源的场景中，您需要先配置GBase ...后续步骤 完成输入组件的配置后，即可配置下游组件，以实现数据同步。详情请参见配置离线单条管道。
配置脚本模式输入组件
脚本模式组件用于配置系统组件不支持的配置项，以满足业务场景。操作步骤进入离线单条管道脚本的开发页面，请参见配置离线单条管道。...后续步骤完成输入组件的配置后，即可配置下游组件，以实现数据同步。具体操作，请参见配置离线单条管道。
配置MongoDB输入组件
本文为您介绍如何配置MongoDB输入组件。操作步骤 请参见配置离线单条管道，进入单条管道脚本的开发页面。按照下图指引，进入MongoDB输入配置...完成输入组件的配置后，即可配置下游组件，以实现数据同步。具体操作，请参见配置离线单条管道。
跨阿里云账号数据迁移或同步时如何配置RAM授权
说明 ...操作流程说明 示例操作，请参见准备工作。...若您已有RAM角色，可以直接为该角色精确授权，然后再修改信任策略（步骤4）。为已有RAM角色精确授权的操作，请参见为已有RAM角色精确授权。...详情请参见跨云账号实现数据同步或迁移。
数据同步模板
本文为您介绍如何使用多库多表同步或者分库分表合并模板实现数据同步。背景信息 Flink全托管支持多库多表同步和分库分表合并两种数据同步方式，二者的区别请参见下表。同步方式 详情 多库多表同步 如果您需要将一个或多个数据库中的一张或...
跨云账号实现数据同步或迁移
在左侧导航栏，选择数据传输（DTS）>数据同步或数据传输（DTS）>数据迁移。说明 若您登录的是极简模式的DMS，请在左上角的中选择全部功能>集成与开发（DTS）>数据同步或全部功能>集成与开发（DTS）> 数据迁移。更多信息请参见自定义DMS界面...
配置API输入组件
配置API输入组件后，可以读取API数据源中的数据至Dataphin，进行数据集成与数据开发。本文为您介绍如何配置API输入组件。...后续步骤 完成输入组件的配置后，即可配置下游组件，以实现数据同步。具体操作，请参见配置离线单条管道。
异地双活实例管理
实现跨地域实例数据同步，需要先为实例开通异地双活功能，即创建异地双活实例。本文介绍如何在消息队列RocketMQ版控制台创建异地双活实例以及修改异地双活实例规格。背景信息 消息队列RocketMQ版依赖于阿里云高速通道专线、事件总线...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。...完成输入组件的配置后，即可配置下游组件，以实现数据同步。具体操作，请参见配置离线单条管道。
跨阿里云账号迁移或同步专有网络下的自建数据库时如何...
本地IDC或第三方云已通过专线、VPN网关或智能接入网关接入至阿里云，现在需要将本地IDC或第三方云中的自建数据库通过专有网络迁移或同步至其他阿里云账号下的云数据库中，详细架构如下图所示。说明 在使用DTS跨阿里云账号迁移或同步专有...
2022年
本文为您介绍如何使用多库多表同步或者分库分表合并模板实现数据同步。数据同步模板 2022-03-04 Flink全托管 新版本 如果作业状态为风险或者异常，则您可以通过作业诊断功能，自动诊断作业风险或者异常的可能原因，再根据系统提供的修复...
功能特性
主集群通过向备集群发送事务日志的方式来实现数据同步，从而确保生产集群能够在遇到数据损坏、灾难等情况下仍然可以快速恢复业务。当 OceanBase 数据库的生产集群出现计划内或者计划外的不可用情况时，主备库可以通过将某一个备集群的角色...
为分布式实例添加子实例
分布式实例创建完成后，仅包含一个子实例，您需要为该分布式实例添加单个或多个子实例来组建完整的架构，即实现子实例间的实时数据同步的需求。前提条件 已创建分布式实例，详情请参见创建分布式实例。功能限制 新增的子实例不能与分布式...
配置数据迁移任务
数据迁移任务可以帮助您快速地实现各种数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文以RDS MySQL迁移至RDS MySQL为例为您介绍配置数据迁移任务的流程。支持的源和目标数据库 阿里...
OGG插件介绍
随着数据规模的不断扩大，传统的RDBMS难以满足OLAP的需求，本文将介绍如何将Oracle的数据实时同步到阿里云的大数据处理平台当中，并利用大数据工具对数据进行分析。OGG采集工具一、背景介绍说明 随着数据规模的不断扩大，传统的RDBMS难以...
从RDS MySQL迁移至自建Kafka
如果Kafka集群的部署位置为本地，且不符合上述场景，您可以将自建Kafka的服务端口开放至公网，然后通过本文介绍的方法来实现数据同步需求。注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升...
如何组织Grafana
隔离了数据源、仪表板、文件夹和其他资源，需要自行编码实现数据同步。组织之间的用户管理更加复杂，不同组织下的用户需要单独配置。缺乏文件夹的灵活性以及工作区的实际隔离。工作区 不同工作区DB、配置文件都是独立的，实现真正的隔离。...
如何组织Grafana
隔离了数据源、仪表板、文件夹和其他资源，需要自行编码实现数据同步。组织之间的用户管理更加复杂，不同组织下的用户需要单独配置。缺乏文件夹的灵活性以及工作区的实际隔离。工作区 不同工作区DB、配置文件都是独立的，实现真正的隔离。...
- 产品推荐
- 这些文档可能帮助您
