阿里云文档 2026-01-12

调用SubmitFile接口提交文件并生成任务-大数据开发治理平台 DataWorks-阿里云

提交文件至调度系统的开发环境,生成对应的任务。

阿里云文档 2025-12-29

新版数据开发中复杂依赖场景调度配置原则与示例

DataWorks支持分钟、小时、日、周、月、年等类型的调度任务互相依赖,调度类型不同,任务执行的周期数不同。任务各周期是通过实例的方式执行,当上下游调度依赖的类型不同时,您可通过该文档了解上下游各周期实例如何挂载依赖,即上下游任务不同周期实例的依赖情况。

阿里云文档 2025-02-25

Node Labels调度实践

Node Labels是YARN提供的节点分区功能,使得YARN在调度时能够在物理层面上对不同类型的作业进行有效隔离。本文为您介绍如何根据您的业务类型和节点类型创建相应的Node Labels。

文章 2021-08-05 来自:开发者社区

使用AirFlow调度MaxCompute

背景airflow是Airbnb开源的一个用python编写的调度工具,基于有向无环图(DAG),airflow可以定义一组有依赖的任务,按照依赖依次执行,通过python代码定义子任务,并支持各种Operate操作器,灵活性大,能满足用户的各种需求。本文主要介绍使用Airflow的python Operator调度MaxCompute 任务一、环境准备Python 2.7.5  Py....

使用AirFlow调度MaxCompute
文章 2020-02-13 来自:开发者社区

使用Airflow调度MaxCompute

一、环境准备 • Python 2.7.5 PyODPS支持Python2.6以上版本• Airflow apache-airflow-1.10.71.安装MaxCompute需要的包 pip install setuptools>=3.0 pip install requests>=2.4.0 pip install greenlet>=0.4.10 # 可选,安装后能加...

使用Airflow调度MaxCompute

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxCompute调度相关内容

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注