大数据开发治理平台 DataWorks调度的相关内容

返回频道大数据开发治理平台 DataWorks调度

阿里云文档 2024-11-13

使用分支节点实现同天两种调度频率执行单个任务

分支节点是DataStudio中提供的逻辑控制系列节点之一。本文将为您介绍通过DataStudio中提供的分支节点（逻辑控制系列节点之一），实现单个任务在业务量处于较高水平时报表任务延迟产出；业务量较低时，报表即时产出的业务需求。

问答 2024-08-26 来自：开发者社区

在大数据计算MaxCompute中，dataWorks可以调度pg数据库的存储过程吗？

问答 2024-08-25 来自：开发者社区

DataWorks任务流，这里调度cu9个CU是充足的，为什么一直启动不起来，一直在等待资源？

问答 2024-08-25 来自：开发者社区

DataWorks选择运行任务的时候运行调度资源组，为什么只有独享调度了，找不到公共调度资源组？ !

DataWorks选择运行任务的时候运行调度资源组，为什么只有独享调度了，找不到公共调度资源组？这个资源组是我买的按量独享，但我现在想用公共调度资源组，region是美国硅谷的

问答 2024-08-25 来自：开发者社区

DataWorks中check节点的任务会一直占用调度并行度吗？

DataWorks中check节点的任务会一直占用调度并行度吗，比如调度资源组的并行度是20，然后我设置了21个check节点，都是凌晨1点开始，没5分钟检查一次，会导致调度资源组的并行度被打满，导致其它任务如hive 无法执行的情况吗？

问答 2024-08-25 来自：开发者社区

DataWorks这种半小时或者小时调度的，怎样让资源摊平？

问答 2024-08-25 来自：开发者社区

DataWorks有一个天调度的节点依赖的是小时调度的节点有没有这种弱依赖的啊？

DataWorks有一个天调度的节点依赖的是小时调度的节点(分别是早上8点和下午3点)，但是这个天调度一定要等到下午3点跑完了，他才会跑，有没有这种弱依赖的啊，就是天调度等小时调度一个小时还没有节点成功，那么弱依赖下天调度直接跑？

问答 2024-08-21 来自：开发者社区

DataWorks独享调度资源组，这里只能看到4点半的资源使用情况？

DataWorks独享调度资源组，这里只能看到4点半的资源使用情况。1、如果这里代表的是美东四点半，那就没有延迟。但是美东3-4点是我们任务高峰期，这个一点波动也没有就不正常了。2、如果这里代表的是北京时间四点半，那就是有延迟显示

问答 2024-08-21 来自：开发者社区

DataWorks【业务日期】是怎么定义的，为什么我的今天的调度任务，非T+1的任务？

DataWorks【业务日期】是怎么定义的，为什么我的今天的调度任务，非T+1的任务。想要算今天分区的数据，也要选【业务日期】是昨天？

问答 2024-08-21 来自：开发者社区

DataWorks调度触发常规情况下是没有什么问题，比如有一些表污染了，出现某些脏数据？

DataWorks调度触发常规情况下是没有什么问题，比如有一些表污染了，出现某些脏数据，事后人工修复数据（手工SQL执行方式），能否触发表相关的数据质量校验（我以为的手工触发）？一般是具有权限比较高的人，手工直接执行SQL，把生产的数据一次性覆盖修复，一般在 dataworks 上写个临时SQL执行就可以了。期望达到只要生产表的数据发生变更或者覆写，都能触发表相关的数据质量