无感集成(Zero-ETL)

为了解决这些问题,阿里云瑶池数据库提供了无感集成(Zero-ETL)功能,可以快速构建业务系统(OLTP)和数据仓库(OLAP)之间的数据同步链路,将业务系统(OLTP)的数据自动进行提取、转换清洗和加载到数据仓库(OLAP),从而一站式完成数据...

配置数据层

可选:您还可以在 同步链路列表 页面进行以下操作:查看同步链路信息:单击 操作 列的 查看,查看同步链路的详细信息。修改同步对象:单击 操作 列的 修改同步对象,进入 编辑同步链路 页面,修改同步对象。释放任务:选择任一同步链路,...

配置数据层

直接录入 同步链路 已录入的同步链路,通过已选中的数据源可直接匹配得到 redis-同步-正向 redis-同步-反向 创建同步链路成功后,您可以在 同步链路列表 页面查看到创建的同步链路。可选:您还可以在 同步链路列表 页面进行以下操作:查看...

监控任务性能

功能 说明 全量同步链路拓扑 全量同步链路主要展示源库到DTS、DTS到目标库两部分的读写情况和网络信息,相关参数解释如下:源库到DTS的链路 BPS:DTS每秒从源库读取数据量,单位为MB/s。RPS:DTS每秒从源库读取的行数。网络延迟:DTS与源库...

镜像同步加速

步骤四:自定义同步链路 说明 自定义同步链路时,相同的跨境地域只能创建一条同步链路,例如杭州到新加坡只能创建一条同步链路。登录 容器镜像服务控制台。在顶部菜单栏,选择所需地域。在 实例列表 页面单击目标企业版实例。在实例列表...

2023年

本文为MSHA 2023年的版本发布记录,介绍发布的特性变更情况。...新增 配置数据层 新增数据源与同步链路的多对一配置 针对应用双活架构、异地双活架构,MSHA数据层支持将多对数据源绑定到同一条数据同步链路。新增 配置数据层

查看同步链路状态和性能

功能 说明 全量同步链路拓扑 全量同步链路主要展示源库到DTS、DTS到目标库两部分的读写情况和网络信息,相关参数解释如下:源库到DTS的链路 BPS:DTS每秒从源库读取数据量,单位为MB/s。RPS:DTS每秒从源库读取的行数。网络延迟:DTS与源库...

实施步骤

通过DTS实时同步PolarDB for MySQL数据到分析型数据库MySQL版需要以下几个步骤:步骤一:创建DTS同步作业 步骤二:配置同步链路 步骤三:查看同步数据 步骤一:创建DTS同步作业 创建DTS同步作业需要用户支付一定的费用,DTS支持两种付费...

通过一键建仓同步至数仓版

注意事项 数据同步过程中,若在源实例PolarDB MySQL中新增库,新增库数据不会自动同步,手动配置同步链路,请参见 手动配置。不要在数据同步过程中增加无主键表,将导致同步链路中断。同步链路中断7天后不再保证数据正确性,请及时处理链路...

通过一键建仓同步至数仓版

注意事项 数据同步过程中,若在源实例RDS MySQL中新增库,新增库数据不会自动同步,需要手动配置同步链路,请参见 手动配置。不要在数据同步过程中增加无主键表,将导致同步链路中断。同步链路中断7天后不再保证数据正确性,请及时处理链路...

使用DTS同步RDS MySQL数据到AnalyticDB MySQL 2.0

如果需要同步的表数量较少且分析型数据库MySQL版表结构与源端表差异较大的话,可以在分析型数据库MySQL版中提前创建表,配置同步链路时候需要把下述步骤6中结构初始化的勾选项去掉即可。数据同步流程介绍 通过DTS实时同步RDS MySQL数据到 ...

数据管理

数据源 数据同步链路管理 指是否开启数据同步功能,开启后即可推送数据,同时会根据推送数据量生成对应账单,计费细则详见:计费方式与价格说明 历史数据源 即实例启动时配置的历史数据源,可以点击修改按钮进行修改,修改历史数据源后需要...

通过联邦分析同步数据

联邦分析使用 AnalyticDB MySQL 的免费高速数据管道服务(APS)将 PolarDB MySQL中的 数据实时同步至 AnalyticDB MySQL 湖仓版(3....后续操作 创建同步链路后,您可以进行SQL开发或Spark开发,具体开发步骤请参考以下文档:SQL开发 Spark开发

切流演练

选择同步链路 选中同步链路,可通过源实例库或目标实例库进行搜索。禁写路由ID 设置禁写路由ID,且仅限1个ID,单击 确认。禁写单元 根据 禁写路由ID 自动生成禁写单元。ACM中的IP地址 选中ACM空间,并添加IP地址。需添加多个IP时可通过英文...

2021年

2021年10月 功能名称 功能概述 变更分类 产品文档 新增阿里云消息队列RocketMQ 异地双活(单元化)容灾架构新增阿里云消息队列RocketMQ,支持纳管多活Topic、Group,配置同步链路以及生效Consumer多活路由规则。新增 配置MQ 多活接入层网关...

升级实例配置

说明 关于链路的规格信息,请参见 数据迁移链路规格说明 和 数据同步链路规格说明。升级数据迁移任务时,选择 迁移链路规格。升级数据同步作业时,选择 同步链路规格。说明 本文介绍通用操作,实际页面可能有差异。如果需要更改同步拓扑,...

创建异地灾备实例

DTS数据同步链路:规格为 small 的 按量付费 同步链路,价格请前往 数据传输详细价格信息 了解。功能限制 灾备实例不支持备份恢复、数据迁移、数据库管理、申请外网访问地址、修改连接地址功能。删库操作不会同步至灾备实例,请您登录灾备...

实时数据同步

支持的同步链路 数据源端 数据目的端 支持的拓扑 备注 MySQL Zsearch(云搜)单向同步 已支持 OceanBase ODPS、DataHub 单向同步 已支持(仅专有云)ORACLE ODPS 单向同步 已支持(仅专有云)MySQL MySQL 单向同步 规划中 数据同步对象 ...

通过数据同步功能同步SLS至湖仓版(推荐)

AnalyticDB for MySQL 湖仓版(3.0)支持新建SLS同步链路,通过同步链路从指定时间位点将日志服务LogStore中的数据实时同步至 湖仓版(3.0),以满足近实时产出、全量历史归档、弹性分析等需求。本文介绍如何添加SLS数据源,新建SLS同步...

通过联邦分析功能同步至湖仓版

单个 PolarDB MySQL 实例仅允许创建 3 个同步链路任务;单个地域仅允许创建 30 个同步链路任务。创建同步链路 登录 PolarDB控制台。在页面左上角,选择目标实例所在地域。在左侧导航栏选择 联邦分析。单击 新建链路,在弹出的新建链路面板...

数据同步链路规格说明

数据同步规格说明 数据同步根据同步链路的同步性能上限,定义了四种规格:micro、small、medium、large,当满足以下条件时,各个规格的同步性能上限才能达到下表中的性能上限。源实例的压力要大于等于各规格对应的性能上限。目标实例的写入...

通过数据同步功能同步Kafka至湖仓版(推荐)

AnalyticDB for MySQL 湖仓版(3.0)支持新建Kafka同步链路,通过同步链路从指定时间位点,实时同步Kafka中的数据入湖,以满足近实时产出、全量历史归档、弹性分析等需求。本文主要介绍如何添加Kafka数据源,新建Kafka同步链路并启动任务,...

通过数据同步功能同步SLS数据至数仓版

新建数据源 说明 如果您已添加了SLS数据源,可跳过该步骤,直接新建同步链路,详情请参见 创建同步链路。登录 云原生数据仓库AnalyticDB MySQL控制台,在左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 数仓版(3.0)页签,单击...

计费常见问题

A:不同规格实例的传输性能不同,当实例其他参数相同且影响因素(传输网络的带宽和网络延时等)固定时,规格越高性能越强,更多信息请参见 数据迁移链路规格说明 和 数据同步链路规格说明。Q:为什么数据同步实例的价格普遍高于数据迁移...

通过数据同步功能同步SLS数据至湖仓版

新建数据源 说明 如果您已添加了SLS数据源,可跳过该步骤,直接新建同步链路,详情请参见 创建同步链路。登录 云原生数据仓库AnalyticDB MySQL控制台,在左上角选择集群所在地域。在左侧导航栏,单击 集群列表,在 湖仓版(3.0)页签,单击...

通过一键建仓同步至数仓版

应用场景 一键建仓主要解决云上企业构建数据仓库时配置数据同步链路繁杂的问题,同时提供了高性价比的 AnalyticDB MySQL版 存储计算资源方案。一键建仓适用于以下场景:全库同步。通过一键建仓一键生成同步链路,将一个或多个日志库中的...

产品优势

高性能 数据同步服务使用高规格服务器来保证同步链路的良好传输性能。相对于传统的数据同步工具,数据同步服务的实时同步功能能够将并发粒度缩小到事务级别,能够并发同步同张表的更新数据,从而极大得提升同步性能,高峰期时,同步性能...

升级任务的链路规格

关于链路的规格信息,请参见 数据迁移链路规格说明 和 数据同步链路规格说明。如果需要更改同步拓扑,您需要满足相关条件,详情请参见 单向同步升级至双向同步。单击 支付,根据提示完成支付流程。相关API API接口 说明 ...

2022年

SDK适配Jedis、Lettuce、Spring框架,控制台支持配置缓存同步链路和切流期间禁写保护功能。同时提供数据不同步双活方案,支持开启SDK同步或异步写对端及读失败后读对端策略。新增 配置数据层 切流流程新增应用节点规则生效检查功能 切流...

异地应用双活切流

如果是单向同步链路切换,则需要执行 建立反向同步链路,等待反向同步初始化 和 重置正向同步链路,双向同步链路切换则不需要。单击等待反向同步初始化的详情,可以看到同步链路的名称,单元 和 反向同步状态,在这里,可以通过 查看,直接...

概述

除此之外,客户还需要购买多个DTS同步链路来持续将多个RW节点上的数据同步至新购买的集群中。使用 多主集群(库表)的全局只读功能后,客户只需要购买一个全局只读节点来处理汇聚库请求。借助于 PolarDB 的共享存储能力,全局只读节点与 多...

无感数据集成(Zero-ETL)

支持的同步链路 RDS for MySQL 至 AnalyticDB for MySQL 的同步链路。费用说明 同步链路不收取费用。前提条件 AnalyticDB for MySQL 数仓版(3.0)集群与 RDS for MySQL 实例位于同一地域。具体操作,请参见 创建数仓版集群 和 快速创建RDS...

新增实时任务

说明 单击 查看同步链路支持范围,可查看实时同步链路源端和目标端支持范围。在数据源下拉列表,单击 创建数据源,可在弹出的面板中新建云计算资源。在 目标端配置 区域,选择目标端、数据对象。说明 若目标端的数据对象中没有与数据源的...

新增实时任务

说明 单击 查看同步链路支持范围,可查看实时同步链路源端和目标端支持范围。在数据源下拉列表,单击 创建数据源,可在弹出的面板中新建云计算资源。在 目标端配置 区域,选择目标端、数据对象。说明 若目标端的数据对象中没有与数据源的...

报错:DTS-30019:Can not find column

可能原因:目标端的表缺少列。说明 例如:DTS-30019:Can ...后续建议:导致目标端缺少列有多种原因,其中一种原因是:同步链路不支持同步DDL,但在源端增加列。对于这种需求,请先在目标端增加列,然后在源端增加列,就不会导致同步任务失败。

购买流程

目前跨境同步链路默认不开放购买,若您需要购买跨境同步任务,请先申请开通跨境数据同步的权限,详情请参见 申请跨境数据同步权限。进入同步任务的列表页面。登录 DMS数据管理服务。在顶部菜单栏中,单击 集成与开发(DTS)。在左侧导航栏...

计费方式

配置数据同步实例时 数据同步实例将从 增量数据采集 模块启动后,开始按同步链路规格来计费。数据同步实例暂停期间仍会收取费用。配置数据迁移实例时 如不勾选增量迁移,则不会收取费用。如勾选增量迁移,则数据迁移实例将从增量迁移任务...

配置告警规则

本文介绍如何配置RDS全球多活数据库集群中双向同步链路的告警规则。操作步骤 访问 全球多活数据库集群 页面。在全球多活数据库集群列表页面,单击目标集群右侧 操作 列中的 更多>配置告警。在 配置告警 对话框中,对同步延迟、同步状态、全...

一站式HTAP服务

此外,PolarDB PostgreSQL版 还提供了一站式HTAP云服务,通过简单的SQL就可以将OLTP引擎的数据快速迁移到内置的OLAP存储和引擎上,内置的同步链路将会自动维持两份数据的一致性。其中,常规的事务型查询可以继续在 PolarDB PostgreSQL版 的...

查询子实例间的同步延迟

在使用过程中,您可以随时查询子实例的同步状态、同步延迟和同步数量,掌握同步链路的实时情况。前提条件 Tair 全球多活实例中至少包含2个子实例。关于如何添加子实例,请参见 为分布式实例添加子实例。操作步骤 登录 Tair管理控制台。在...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
可观测链路 OpenTelemetry 版 数据传输服务 混合云存储 智能数据建设与治理 Dataphin 应用实时监控服务 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用