问答 2023-03-29 来自:开发者社区

dataworks上配置mongodb的增量集成时间区间的案例都有什么?

dataworks上配置mongodb的增量集成时间区间的案例都有什么?

问答 2022-02-15 来自:开发者社区

Dataworks在配置MySql整库增量迁移时,怎么根据gmt_modified进行增量控制?

请问gmt_modified存在哪里?源表中or目标表中?源文档:在迁移模式、并发控制区中,选择同步方式为每日增量,并配置增量字段为gmt_modified,数据集成默认会根据您选择的增量字段生成具体每个任务的增量抽取where条件,并配合DataWorks调度参数比如${bdp.system.bizdate}形成针对每天的数据抽取条件。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks配置相关内容

大数据开发治理平台 DataWorks更多配置相关

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注