前提条件 使用Tapdata Cloud同步Oracle数据到表格存储前,需要完成如下准备工作。已注册 Tapdata Cloud账号。已创建表格存储实例和表。具体操作,请参见 通过控制台使用。创建RAM用户并完成授权。已创建RAM用户,并授予RAM用户管理表格存储...
详细信息 Dataphin通过数据管道同步数据至Oracle数据库时,会把空字符串解析插入为NULL。Oracle 认为''和NULL等价,这个是Oracle特性决定的,手动写SQL插入Oracle空字符串,查询发现实际也是NULL。这个和同步任务没关系。适用于 Dataphin
问题描述 本文主要描述了同步任务从Oracle同步数据到ODPS时,Oracle中的空值在ODPS中显示为\N的解决方法。问题原因 同步任务的编码格式选择的是系统默认。解决方案 将同步任务的编码格式选择为GBK或者UTF-8。适用于 Dataphin
Oracle数据库侧检查SQL已经执行完成,最后手动终止同步任务。2022-11-08 21:17:15.816[job-0]INFO JobContainer-DataX Reader.Job[odpsreader]do prepare work.2022-11-08 21:17:15.816[job-0]INFO JobContainer-DataX Writer.Job...
问题描述 用户同步数据,从hive同步数据到Oracle,hive那边字段类型...问题原因 Oracle数据类型number需要指定精度才可以保存小数。解决方案 Oracle修改字段类型为number(XXX,XXX),具体根据实际清空适配小数位数。适用于 Dataphin 精度丢失
问题描述 Dataphin管道任务将数据同步到Oracle数据库选择表之后报错“获取元数据失败SQLTimeoutException:ORA-01013:user requested cancel of current operation”。问题原因 根据报错“ORA-01013:user requested cancel of current ...
问题描述 管道任务中,从Oracle向MySQL同步数据,在Oracle有2万数据,同步到MySQL后只有1条数据。管道任务运行成功,状态正常。问题原因 由于MySQL存在主键或者唯一性索引,该列在Oracle中所有数据相同,因此导致数据丢失。解决方案 根据...
前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已开启ARCHIVELOG(归档模式),设置合理的归档日志保持周期且归档日志能够被访问,详情请参见 ARCHIVELOG。自建Oracle数据库已开启Supplemental ...
前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已开启ARCHIVELOG(归档模式),设置合理的归档日志保持周期且归档日志能够被访问,详情请参见 ARCHIVELOG。自建Oracle数据库已开启Supplemental ...
问题描述 Dataphin中Oracle数据源数据通过管道同步至HIVE库,发现NVCHAR2类型的字段映射至STRING类型字段,同步之后数据查询为乱码。Oracle和HIVE库组件编码都是UTF-8,且源表字段类型是VARCHAR2不会乱码,NVCHAR2的就都会乱码。Oracle数据...
已为目标端 OceanBase 数据库 Oracle 租户创建专用于数据同步项目的数据库用户,并为其赋予了相关权限。详情请参见 创建数据库用户。如果您需要进行增量同步,请完成以下前置操作:增量同步时,数据传输不支持 DDL 的自动同步。如果待同步...
背景信息 oracle_fdw是PostgreSQL外部表插件,可以读取Oracle数据库的数据,也非常方便地实现PostgreSQL与Oracle数据同步。更多详细信息请参见 oracle_fdw。注意事项 如果需要执行UPDATE和DELETE操作,需要在创建外部表时为主键列设置key...
如果是 Oracle 数据库至 OceanBase 数据库等库到库的数据迁移或数据同步,OceanBase 数据库上的 PK 名称和 Oracle 数据库的不同,因此无法在 OceanBase 数据库中删除。迁移 OceanBase 数据库 Oracle 租户的数据至 Oracle 数据库时,不支持...
本文为您介绍DataWorks的Oracle数据同步能力支持情况。支持的版本 离线读写 版本 离线读(Oracle Reader)离线写(Oracle Writer)Oracle 11.2 or 11gR2 支持 支持 Oracle 12.1 or 12cR1 支持 支持 Oracle 12.2 or 12cR2 支持(新版本特性...
date datetime datetime 支持 支持 支持 date timestamp timestamp 支持 支持 支持 通过OGG将Oracle数据同步到 AnalyticDB for MySQL 使用OGG账号登录ECS。sqlplus ogg/ogg 执行以下SQL在Oracle中创建源表。drop table users.xqtest15;...
本文介绍如何使用数据传输服务DTS(Data Transmission Service),将自建Oracle的数据同步至MaxCompute。前提条件 已开通MaxCompute并创建MaxCompute项目。更多信息,请参见 开通MaxCompute和DataWorks 和 创建MaxCompute项目。已设置...
同步Oracle数据源的数据至其他数据源的场景中,您需要先配置Oracle输入组件读取的源数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置Oracle输入组件。前提条件 在开始执行操作前,请确认您已完成以下操作:已创建Oracle数据...
同步Oracle数据源的数据至其他数据源的场景中,您需要先配置Oracle输入组件读取的源数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置Oracle输入组件。前提条件 已创建Oracle数据源。具体操作,请参见 创建Oracle数据源。进行...
同步Oracle数据源的数据至其他数据源的场景中,您需要先配置Oracle输入组件读取的源数据源信息,再配置数据同步的目标数据源。本文为您介绍如何配置Oracle输入组件。前提条件 已创建Oracle数据源。具体操作,请参见 创建Oracle数据源。进行...
详情请参见 基于OGG DataHub插件将Oracle数据同步上云。说明 该项目已经开源,您可进入 aliyun-maxcompute-data-collectors 进行查看。MMA迁移工具 MMA利用Meta Carrier连接用户的Hive Metastore服务,抓取用户的Hive Metadata,并利用这些...
迁移 OceanBase 数据库 MySQL 租户的数据至 OceanBase 数据库 MySQL 租户时,支持同步 DDL。同步 DDL 支持的范围 创建表 CREATE TABLE 包括分区表,不包括 CREATE TABLE AS SELECT。支持的分区表类型有一级分区(Hash、Range 和 List)、二...
数据传输服务DTS(Data Transmission Service)支持将自建Oracle同步至 PolarDB MySQL版 集群,可以实现在本地应用不停服的情况下,平滑地完成Oracle数据库的数据同步。前提条件 已创建存储空间大于源自建Oracle的目标 PolarDB MySQL版 ...
自建Oracle数据库已开启Supplemental Logging,且已开启supplemental_log_data_pk,supplemental_log_data_ui,详情请参见 Supplemental Logging。若自建Oracle为RAC结构,需接入阿里云VPC。为保证DTS任务成功运行,您需要将Oracle RAC的...
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
如果同步的源数据库类型为自建Oracle,您需要在配置具体的同步任务前,参考本文的注意事项及限制,以保障数据同步任务的正常运行。源库为Oracle的同步方案概览 根据如下同步方案,查看同步任务的注意事项及限制:说明 在库表结构同步过程中...
本文介绍的Oracle数据同步是通过OGG的DataHub插件实现的,该DataHub插件在架构图中处于Replicat的位置,会分析Trail文件,将数据的变化记录写入DataHub中,可以使用流计算对datahub中的数据进行实时分析,也可以将数据归档到MaxCompute中...
本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 PolarDB PostgreSQL版(兼容Oracle)集群的数据同步至 阿里云消息队列Kafka版。前提条件 源 PolarDB PostgreSQL版(兼容Oracle)集群中 wal_level 参数的值需设置为 ...
前提条件 已创建源自建Oracle数据库和目标实例 阿里云流式数据服务DataHub,且自建Oracle数据库的版本为19c、18c、12c、11g、10g或9i版本。自建Oracle数据库已开启ARCHIVELOG(归档模式),设置合理的归档日志保持周期且归档日志能够被访问...
前提条件 已创建存储空间大于源自建Oracle数据库已使用存储空间的目标 PolarDB PostgreSQL版(兼容Oracle)集群。说明 目标集群 PolarDB PostgreSQL版(兼容Oracle)的创建方式,请参见 创建PolarDB PostgreSQL版(兼容Oracle)集群。源...
前提条件 已创建源自建Oracle数据库和目标PolarDB-X 2.0实例,且自建Oracle数据库的版本为19c、18c、12c、11g、10g或9i版本。自建Oracle数据库已开启ARCHIVELOG(归档模式),设置合理的归档日志保持周期且归档日志能够被访问,详情请参见 ...
执行数据同步前需评估源库和目标库的性能,同时建议业务低峰期执行数据同步。否则全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致数据库的负载上升。全量初始化会并发执行INSERT操作,导致目标数据库的表产生碎片,因此全量...
通过数据传输服务DTS(Data Transmission Service),您可以实现 PolarDB PostgreSQL版(兼容Oracle)集群间的单向数据同步。前提条件 源 PolarDB PostgreSQL版(兼容Oracle)集群需为最新版本,升级方式详情请见 版本管理。源 PolarDB ...
前提条件 自建Oracle数据库的版本为9i、10g、11g、12c、18c或19c版本。自建Oracle数据库已开启ARCHIVELOG(归档模式),设置合理的归档日志保持周期且归档日志能够被访问,详情请参见 ARCHIVELOG。自建Oracle数据库已开启Supplemental ...
云数据库PolarDB提供了...数据迁移 使用场景 文档链接 从自建数据库迁移至PolarDB 自建Oracle迁移至PolarDB PostgreSQL版(兼容Oracle)数据同步 使用场景 文档链接 PolarDB兼容Oracle数据间同步 PolarDB PostgreSQL版(兼容Oracle)间的迁移
在 数据传输 数据同步 页面,单击新购买的数据同步项目后的 配置。如果您需要引用已有的项目配置信息,可以单击 引用配置。详情请参见 引用和清空数据同步项目配置。在 选择源和目标 页面,配置各项参数。参数 描述 同步项目名称 建议使用...
其他限制 单个数据同步任务只能同步一个数据库,如需同步多个数据库,您需要为每个数据库配置数据同步任务。在增量数据同步过程中,如果同步对象的选择粒度为Schema,在待同步的Schema中创建了新的表或使用RENAME命令重建了待同步的表,您...