数据同步

数据同步提供批量、实时多源异构数据的便捷同步或接入能力,系统提供完善的数据接入配置、任务运行监控等功能,有效保障数据接入的稳定性和可控性,满足各类平台、数据源及应用系统间的数据汇聚需求。同时支持对存储在基于ArcGIS、超图等...

数据同步

Dataphin支持通过数据同步的方式,将业务数据源的数据引入Dataphin平台。背景说明 如果您是在 2020年4月之后 购买的Dataphin,则数据同步能力通过数据集成功能实现(即系统 不再提供数据同步的功能入口)。数据集成为您提供简单高效、安全...

数据同步

数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力,系统提供完善的数据接入配置、任务运行监控等功能,有效保障数据接入的稳定性和可控性,满足各类平台、数据源及应用系统间的数据汇聚需求。前提条件 已根据快速入门教程...

数据同步

RDS提供了多种数据同步方案,可满足单向、双向以及不同引擎间的同步需求。适用场景 文档链接 MySQL间数据同步 MySQL实例间的双向同步 RDS MySQL实例间的单向同步 从ECS上的自建MySQL同步至RDS 从通过专线、VPN网关或智能接入网关接入的自建...

数据同步

借助数据传输服务DTS(Data Transmission Service),云数据库 Tair(兼容 Redis)为您提供了丰富数据同步方案,可适用于同步上云、数据异地多活、数据容灾、数据分析等多种业务场景。DTS介绍 DTS 是阿里云提供的实时数据流服务,集数据...

数据同步

数据同步是指数仓或者数据湖内的数据与上游业务库内的数据保持同步的状态。当上游业务库内的数据发生变更之后,下游的数仓/数据湖立即感知到数据变化,并将数据变化同步过来。在数据库中,这类场景称为Change Data Capture(CDC)场景。...

同步数据

旨在介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据同步操作。前提条件 在进行数据同步之前,请确保已准备好所需的工作环境。具体操作步骤请参见 准备环境。章节目标 将案例提供的公共数据源中的数据同步至...

同步数据

user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据...

同步数据

本文为您介绍如何新建HttpFile和MySQL数据源来访问本教程所提供的用户信息与网站日志数据,配置数据同步链路至私有OSS数据源,并通过EMR Hive节点建表查询同步后的数据,完成数据同步的操作过程。前提条件 开始本文的操作前,请准备好需要...

同步数据

本章节旨在完成数据同步操作。章节目标 本章节通过 数据集成 将平台提供的 MySQL数据源内的用户基本信息数据 与 HttpFile数据源内的用户网站访问日志数据 同步至 私有OSS对象存储 创建的数据源中。源端数据源类型 源端待同步数据 源端表...

数据同步模板

您可以使用数据同步模板帮您快速生成数据同步的Flink SQL作业代码。本文为您介绍如何使用多库多表同步或者分库分表合并模板实现数据同步。背景信息 实时计算Flink版支持多库多表同步和分库分表合并两种数据同步方式,二者的区别请参见下表...

数据同步流程

数据传输提供数据同步功能,帮助您实现数据源之间的数据实时同步。适用于数据异地多活、数据异地灾备、数据聚合和实时数据仓库等多种业务场景。您可以参考以下流程进行同步前的准备工作、以及购买、配置和管理数据同步任务。完成准备工作。...

全量数据同步

通过选择已注册的数据源端数据和目标端,实现全量任务自动建表的方式创建离线同步周期任务,本文介绍如何创建MySQL to MaxCompute离线全量数据同步一次性调度的任务。前提条件 已新建工作组,具体操作,请参见 新建工作组。已在工作组中...

增量数据同步

通过选择已注册的数据源端数据和目标端,实现增量任务自动建表的方式创建离线同步周期任务,本文介绍如何创建MySQL to MaxCompute离线增量数据同步周期调度的任务。前提条件 已新建工作组“信息中心(xxzx)”,具体操作,请参见 新建工作...

数据同步简介

数据同步是 mPaaS 平台的一个核心基础服务组件。数据同步源自蚂蚁集团内面向移动应用、从服务端到客户端进行海量数据推送的全链路解决方案—SYNC。该组件提供了一个安全的基于传输控制协议(Transmission Control Protocol,简称 TCP)和...

同步数据

user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据...

数据同步操作指导

数据同步使用流程 通常,使用数据传输服务DTS(Data Transmission Service)执行数据同步的操作,您需要经历如下步骤。操作流程 说明 准备工作概览 在使用DTS执行数据同步前,您需要对源或目标数据库做一些准备工作,以满足DTS对环境的要求...

结束数据同步作业

如果不再需要数据同步,您可以结束数据同步作业,停止将源库的数据变更同步至目标库。前提条件 数据同步作业处于 同步中、已暂停、同步失败、同步初始化中 或 同步初始化失败 状态。注意事项 结束数据同步作业后,数据同步作业将处于 已...

数据同步方案概览

数据同步功能帮助您实现数据源之间的数据实时同步,适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、云BI及实时数据仓库等多种业务场景。本文将介绍数据同步功能支持的数据库、同步类型和同步拓扑。收费策略 DTS数据同步...

使用数据传输同步数据

数据同步能够保持源端和目标端的数据一致性,实现关键业务的数据实时流动。本文以同步 OceanBase 数据库的数据至 Kafka 为例,介绍如何使用数据传输同步数据。前提条件 在同步数据之前,您需要确认以下信息:数据传输已具备云资源访问权限...

购买数据同步任务

本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步任务。背景信息 目前数据同步任务仅支持预付费模式,即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步任务后,再对任务进行具体配置和管理。数据同步任务...

DataX同步数据

DataX是异构数据源离线同步的工具,支持多种异构数据源之间高效的数据同步。Dataphin系统内嵌了DataX组件,支持通过构建Shell任务调用DataX,实现数据同步。本教程以RDS MySQL数据库为例,为您介绍基于Dataphin如何调用DataX同步数据。前提...

DataX同步数据

DataX是异构数据源离线同步的工具,支持多种异构数据源之间高效的数据同步。Dataphin系统内嵌了DataX组件,支持通过构建Shell任务调用DataX,实现数据同步。本教程以RDS MySQL数据库为例,为您介绍基于Dataphin如何调用DataX同步数据。前提...

配置数据同步任务

说明 源和目标RDS MySQL实例可以不同或相同,即您可以使用DTS实现两个RDS MySQL实例间的数据同步或同一RDS MySQL实例内的数据同步数据库账号 填入源 RDS MySQL 实例的数据库账号,需具备待同步对象的读权限。数据库密码 填入该数据库账号...

结束数据同步任务

本文为您介绍如何结束数据同步任务。使用限制 数据传输支持结束处于 已暂停、失败 和 已完成 状态的数据同步任务。操作步骤 任务结束后,仍保留当前任务的配置信息,您可以根据需要选择清空任务配置后重新配置。详情请参见 清空任务配置。...

数据同步方案概览

数据同步 使用场景 文档链接 PolarDB 间的数据同步 PolarDB MySQL集群间的单向同步 PolarDB MySQL集群间的双向同步 PolarDB 与其它数据库的数据同步 RDS MySQL同步至PolarDB MySQL集群 PolarDB MySQL同步至RDS MySQL 从PolarDB MySQL同步至...

全增量数据同步

本文主要介绍全增量数据同步的使用场景,功能列表,迁移优势,使用限制以及创建数据同步任务等操作。使用场景 大版本升级:HBase1.x升级HBase2.x。跨地域迁移:例如从青岛机房迁移到北京机房。跨账号迁移:支持不同账号迁移数据。集群升配...

重新配置数据同步作业

当您需要停止数据同步或重新配置数据同步时,您可以通过本文的方法来重置数据同步作业。前提条件 数据同步作业不处于 未配置 状态。费用影响 包年包月:无影响。按量付费:数据同步作业将转变为 未配置 状态并停止计费,再次完成数据同步...

上线离线数据同步任务

新增离线数据同步任务后,需对任务进行上线操作,同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务,具体操作,请参见 新增离线数据同步任务、批量新增离线数据...

数据同步拓扑介绍

数据同步功能支持多种同步拓扑,您可以根据业务需求规划您的同步实例。本文介绍DTS支持的同步拓扑类型和使用说明。单向同步 在单向同步的拓扑中,为保障同步数据的一致性,对目标实例中的同步对象应只进行读操作,请勿进行写操作。拓扑类型...

新增离线数据同步任务

数据同步支持离线数据同步任务的新建。离线数据同步任务支持的云计算资源类型为MySQL、Oracle、SQL Server、Hdfs、ftp、PostgreSQL、Hive、MaxCompute、AnalyticDB PostgreSQL、OSS。本文以同步MySQL数据源到MaxCompute目标端为例,介绍...

数据同步链路规格说明

本文介绍数据同步各链路规格的说明。注意事项 该性能规格参考的是测试数据,不作为产品SLA的评判标准。使用DTS可实现数据秒级同步到目标实例,但受限于源实例的运行负载、传输网络的带宽、网络延时、目标实例写入性能等多种因素的影响,DTS...

上线离线数据同步任务

新增离线数据同步任务后,需对任务进行上线操作,同步任务上线后会按照创建同步任务中设置的调度周期执行。本文介绍如何上线离线数据同步任务。前提条件 已新增离线数据同步任务,具体操作,请参见 新增离线数据同步任务、批量新增离线数据...

快速入门-数据同步

您可以通过云备份控制台将NAS、HDFS、OSS和S3源端数据同步至目的端。本文介绍该场景涉及的主要步骤。使用 云备份 控制台进行数据同步的步骤如下所示:说明 同步HDFS、本地NAS、S3和OSS数据源前,您需要在数据源所在服务器安装客户端。客户...

批量操作数据同步任务

本文为您介绍如何使用数据传输对数据同步任务进行批量操作。背景信息 数据传输支持在 同步任务列表 页面,对数据同步任务进行批量操作。不同状态的数据同步任务支持不同的批量操作。数据同步任务的状态 支持的批量操作 未配置 无 未启动 ...

数据同步作业怎么更改同步源实例

数据同步支持重新配置同步作业,如果您需要修改同步作业的源实例,那么可以使用 重新配置任务 功能,重新配置同步作业。

通过数据同步功能同步SLS数据至数仓版

通过 AnalyticDB for MySQL 的数据同步功能,您可以将SLS中指定时间点之后产生的数据实时同步至 基础版或数仓版 集群,以满足日志数据实时分析的需求。前提条件 基础版或数仓版 集群与日志服务SLS的 Project和 Logstore位于同一地域。具体...

新增离线数据同步任务

数据同步支持离线数据同步任务的新建。离线数据同步任务支持的云计算资源类型为MySQL、Oracle、SQL Server、Hdfs、ftp、PostgreSQL、Hive、MaxCompute、AnalyticDB PostgreSQL、OSS。本文以同步MySQL数据源到MaxCompute目标端为例,介绍...

查询数据同步操作记录

查询操作历史记录的步骤如下:登录 mPaaS 控制台,进入目标应用后,在左侧导航栏单击 数据同步 数据同步,进入数据同步页面。在右侧的 操作记录 标签页下,通过操作者账号、操作动作类型或操作日期来筛选操作记录。设置筛选条件后,单击 ...

申请跨境数据同步权限

阅读DTS跨境数据同步数据合规承诺,并勾选相应条款。单击 提交。说明 系统将自动进行审批,请刷新页面后继续操作。后续步骤 跨境数据同步权限开通后,您可以配置跨境数据同步任务。若您是在任务页面申请的跨境数据同步权限,可以继续配置跨...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 云数据库 RDS 云数据库 Tair(兼容 Redis®) 人工智能平台 PAI 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用