[帮助文档] 如何配置同步解决方案任务_大数据开发治理平台 DataWorks(DataWorks)

完成数据源、网络、资源的准备配置后,您可以根据同步场景选择同步解决方案,创建并执行同步任务,将源端数据同步至目标端。本文为您介绍同步任务的通用配置流程,不同的同步方案配置流程可能存在差异,对应方案配置详情请以界面为准。

《全链路数据治理-全域数据集成》——二、实时与离线同步能力介绍——3. 实时同步场景与配置

3. 实时同步场景与配置1) 单表 ETL 实时同步l 将单个表或者 topic 内的数据同步到另外一个表中,整个流程支持图形化开发无需编写代码,单表实时同步至单表时,支持使用托拽的方式实现任务开发,业务新手也能够轻松上手。 l 单表增量数据实时同步场景下,您可以根据业务需求,对输入数据源进行数据过...

《全链路数据治理-全域数据集成》——二、实时与离线同步能力介绍——9. 离线同步场景与配置

《全链路数据治理-全域数据集成》——二、实时与离线同步能力介绍——9. 离线同步场景与配置

9. 离线同步场景与配置不同同步方式的区别:1) 向导模式:提供向导式的开发引导,通过可视化的填写和下一步的引导,助您快速完成数据同步任务的配置工作。向导模式的学习成本低,但无法支持部分高级功能。详情请参见通过向导模式配置任务。 2) 脚本模式:提供脚本式的开发引导,通过直接编写数据同步的 JSON...

[帮助文档] Dataphin管道任务将逻辑表数据集成到业务数据库中时,调度配置中如何解析逻辑表任务为上游依赖[KB:447045]

概述本文主要介绍Dataphin管道任务将逻辑表数据集成到业务数据库中时,调度配置中如何解析逻辑表任务为上游依赖。详细信息由于Dataphin3.3版本开始,管道任务中没有自动解析的按钮,很多用户将逻辑表数据通过管道任务同步到其他业务数据库时,不知道如何添加逻辑表为对应的上游依赖。解决方案:先给管道...

[帮助文档] Dataphin配置DataX同步任务执行脚本报错获得资源信息失败

问题描述Dataphin配置DataX同步任务执行脚本报错:获得资源信息失败。问题原因在资源管理上传JSON文件时,自行输入了名称。此名称不用自行输入,上传文件后会自动生成。解决方案重新上传JSON文件,在脚本中使用自动生成的名称即可。适用于Dataphin版本:v2.9.4-3

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

DataWorks
DataWorks
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。
2700+人已加入
加入
相关电子书
更多
基于 Flink CDC 打造 企业级实时数据集成方案
全链路数据治理-全域数据集成
Flink CDC:新一代数据集成框架
立即下载 立即下载 立即下载