阿里云文档 2024-12-04

优雅下线表和任务

对于数据治理过程中的无效任务或表,数据资产治理为您提供完整的下线方案,包含下线风险评估、下线通知推送、下线过程管理等全流程功能,为您解决人工识别下线风险、任务存在正常调度的下游任务时不能下线、因无法预知风险而不敢轻易下线等问题,同时提供批量下线功能,方便统一管理和执行,为您提升下线效率。

阿里云文档 2024-11-27

离线同步任务

DataWorks的离线同步节点提供读取(Reader)和写入(Writer)插件,简化了从源数据库到目标数据库的数据迁移过程。您可以在可视化界面配置数据源与目标源,结合DataWorks的调度能力,实现全量或增量数据同步。本文将以MaxCompute作为源数据库,Hologres作为目标数据库,为您介绍如何使用离线同步节点完成数据同步。

阿里云文档 2024-10-29

数据集成Serverless同步任务

本文介绍数据集成Serverless同步任务的特性以及相关配置。

阿里云文档 2024-10-28

MySQL-Hologres的Serverless整库实时任务

本文介绍MySQL-Hologres的Serverless整库实时任务。

阿里云文档 2024-10-10

数据集成实时任务Check节点最佳实践

本文介绍为数据集成实时任务配置Check节点,触发下游任务启动。

问答 2024-06-24 来自:开发者社区

DataWorks配了整库全增量(准实时)的数据同步任务 为什么今天没有在ods里创建昨天的分区呢?

DataWorks配了整库全增量(准实时)的数据同步任务, hlj_wlhy_odps_second_log 增量表昨天的数据是有的,为什么今天没有在ods里创建昨天的分区呢? 需要点这个提交执行吗? 我昨天没点,我看任务一直在跑,就没点

问答 2024-06-17 来自:开发者社区

DataWorks有多个任务往一张表写数据,每个任务对应一个二级分区,哪个任务写了数据?

DataWorks有多个任务往一张表写数据,每个任务对应一个二级分区,哪个任务写了数据,就触发那个分区的校验,并且二级分区的值就是像我刚才表达的是字符。现在是我在自定义sql能拿到一级分区的值$yyyymmdd-1],但是二级分区想要动态的引用到触发校验的那任务,举个例子就是:比如一个任务A写 dt=20240612/source_table=abc.efg 分区,另一个任务B写dt=20240....

问答 2024-06-02 来自:开发者社区

DataWorks同步任务动态分区

DataWorks同步任务动态分区

问答 2024-05-20 来自:开发者社区

DataWorks这个是他的下游任务,能看到读取分区的数据是0怎么办?

DataWorks这个是他的下游任务,能看到读取分区的数据是0?

文章 2024-04-30 来自:开发者社区

DataWorks产品使用合集之DataWorks中,填写ODPS SQL任务中的参数和分区信息如何解决

问题一:DataWorks公有云表权限现在能控制到行级别吗? DataWorks公有云表权限现在能控制到行级别吗? 参考回答: 支持的 可以参考看下 https://help.aliyun.com/zh/maxcompute/user-guide/label-based-access-control?spm=a2c4g.11186623.0.i2 ...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks任务相关内容

大数据开发治理平台 DataWorks更多任务相关

产品推荐

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

+关注