阿里云文档 2026-04-13

节点调度依赖的同周期配置-大数据开发治理平台 DataWorks-阿里云

依赖同周期某节点,是指本节点本周期运行,依赖上游节点当前周期的数据产出情况(即任务执行情况),待上游当前周期实例执行成功后,本节点才会运行。通常,若当前任务需依赖上游任务同周期产出的表数据时,可为当前任务设置依赖该上游任务的同周期任务。DataWorks提供多种同周期依赖配置方式,并支持依赖预览功能,您可及时查看并调整有误依赖,保障任务调度符合预期。本文为您介绍同周期依赖的注意事项、配置原理、配置...

阿里云文档 2026-04-13

配置调度周期、调度时间与依赖关系

调度周期定义节点在生产环境下自动执行的频率。DataWorks 调度系统根据配置的调度周期自动生成周期实例,并依据节点间依赖关系和实例的定时时间触发执行。

阿里云文档 2026-04-08

配置节点间的跨周期依赖关系-大数据开发治理平台 DataWorks-阿里云

依赖上一周期,是指本节点本次实例运行,依赖相应节点上一周期实例的运行情况,待上一周期实例运行成功后,本节点才会运行。通常,若本节点需依赖上游昨天产出的数据,或小时、分钟任务依赖自己上一小时或分钟实例,可设置跨周期依赖。本文为您介绍跨周期依赖的配置及依赖形式。

阿里云文档 2026-01-12

调用SubmitFile接口提交文件并生成任务-大数据开发治理平台 DataWorks-阿里云

提交文件至调度系统的开发环境,生成对应的任务。

阿里云文档 2025-12-29

新版数据开发中复杂依赖场景调度配置原则与示例

DataWorks支持分钟、小时、日、周、月、年等类型的调度任务互相依赖,调度类型不同,任务执行的周期数不同。任务各周期是通过实例的方式执行,当上下游调度依赖的类型不同时,您可通过该文档了解上下游各周期实例如何挂载依赖,即上下游任务不同周期实例的依赖情况。

文章 2025-01-03 来自:开发者社区

如何让DataWorks调度依赖一个非DataWorks的任务结点,如数据上传任务?

很多时候我们需要借助DataWorks的调度功能来执行一系列的结点。但是上游结点并不通过DataWorks来运行,这应该怎么办呢?我们基本想法是在创建一个空分区,然后通过DataWorks去检查这个分区。 1、在MaxCompute中增加一个表的空分区,并且在DataWorks中检查这个分区再运行的步骤如下: 增加空分区: 使...

如何让DataWorks调度依赖一个非DataWorks的任务结点,如数据上传任务?
问答 2024-08-26 来自:开发者社区

在大数据计算MaxCompute中,dataWorks可以调度pg数据库的存储过程吗?

在大数据计算MaxCompute中,dataWorks可以调度pg数据库的存储过程吗?

问答 2024-08-25 来自:开发者社区

DataWorks任务流,这里调度cu9个CU是充足的,为什么一直启动不起来,一直在等待资源?

DataWorks任务流,这里调度cu9个CU是充足的,为什么一直启动不起来,一直在等待资源?

问答 2024-08-25 来自:开发者社区

DataWorks选择运行任务的时候运行调度资源组,为什么只有独享调度了,找不到公共调度资源组? !

DataWorks选择运行任务的时候运行调度资源组,为什么只有独享调度了,找不到公共调度资源组?这个资源组是我买的按量独享,但我现在想用公共调度资源组,region是美国硅谷的

问答 2024-08-25 来自:开发者社区

DataWorks中check节点的任务会一直占用调度并行度吗?

DataWorks中check节点的任务会一直占用调度并行度吗,比如调度资源组的并行度是20,然后我设置了21个check节点,都是凌晨1点开始,没5分钟检查一次,会导致调度资源组的并行度被打满,导致其它任务如hive 无法执行的情况吗?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks更多调度相关

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注