大数据开发治理平台 DataWorks调度运行的相关内容

阿里云文档 2024-12-11

使用DataWorks开发调度AnalyticDB Spark作业

DataWorks提供全链路大数据开发治理能力，支持包括AnalyticDB在内的多种计算引擎。DataWorks数据开发（DataStudio）模块支持工作流可视化开发和托管调度运维，能够按照时间和依赖关系轻松实现任务的全面托管调度。您可以在DataWorks中通过ADB Spark SQL和ADB Spark节点开发和调度Spark作业（Spark SQL作业和Spark应用作业）。

阿里云文档 2024-11-13

使用分支节点实现同天两种调度频率执行单个任务

分支节点是DataStudio中提供的逻辑控制系列节点之一。本文将为您介绍通过DataStudio中提供的分支节点（逻辑控制系列节点之一），实现单个任务在业务量处于较高水平时报表任务延迟产出；业务量较低时，报表即时产出的业务需求。

阿里云文档 2024-09-06

DataWorks调度Spark

DataWorks是基于MaxCompute作为计算和存储引擎的海量数据离线加工分析平台，用于工作流可视化开发和托管调度运维，支持按照时间和依赖关系的任务全面托管调度。您可以在DataWorks中，通过Shell节点或自定义节点调度和管理云原生数据仓库 AnalyticDB MySQL 版的Spark作业。

文章 2024-06-09 来自：开发者社区

DataWorks产品使用合集之如果作业选了独享调度资源，后期任务阻塞，会自动分配到公共调度资源运行吗

问题一：DataWorks怎么配query？ DataWorks怎么配query？参考回答：参考官方回答：https://developer.aliyun.com/ask/473227 在部分业务场景中，where配置项不足以描述所筛选的条件，可以通过querySql配置项来自定义筛选SQL。当配置querySql时，MySQL ...

问答 2024-06-02 来自：开发者社区

DataWorks数据地图我不想等调度任务运行后隔天生成，能手动操作么？

DataWorks数据地图我不想等调度任务运行后隔天生成，能手动操作么？这个隔天生成，我设置的是00:30 运行，那今天提交了，是不是要等到后天才能看到地图？

问答 2024-05-20 来自：开发者社区

DataWorks前一日的调度运行状态成功的条数为什么会比当日的运行成功条数少呢？

DataWorks前一日的调度运行状态成功的条数为什么会比当日的运行成功条数少呢？也没有下线，然后其他状态都是0

文章 2024-04-30 来自：开发者社区

DataWorks操作报错合集之在DataWorks中，任务流在调度时间到达时停止运行，是什么原因导致的

问题一：DataWorks运行调度的时候，到时间了这个任务流为什么会在这里停下来？ DataWorks运行调度的时候，到时间了这个任务流为什么会在这里停下来？调度是每6个小时运行一次但是到时间了这个任务没有运行是因为什么？ ...

文章 2024-04-29 来自：开发者社区

DataWorks产品使用合集之阿里云DataWorks中，天任务依赖小时任务的调度运行如何解决

问题一：DataWorks天任务依赖小时任务，调度是怎么跑的？ DataWorks天任务依赖小时任务，调度是怎么跑的？参考回答：在DataWorks中，天任务依赖小时任务的调度运行过程如下：创建任务：首先需要创建两个任务：一个为小时级别的任务（例如每个小时跑一次），另一个为天级别的任务。 ...

文章 2024-04-29 来自：开发者社区

DataWorks操作报错合集之在DataWorks中设置了一个任务节点的调度时间，并将其发布到生产环境，但到了指定时间（例如17:30）却没有产生运行实例和相关日志如何解决

问题一：DataWorks任务节点设置调度时间发布到生产环境后，到点没有产生运行实例和相关日志，什么原因？ DataWorks任务节点设置调度时间发布到生产环境后，到点没有产生运行实例和相关日志。例如把任务节点设置成17.30执行，我17.20把任务提交到生产环境，但是到了17.30没有运行是什么原因造成的？参考回答：发布后即时生成的话预留10分...