文章 2025-05-21 来自:开发者社区

Dataphin V5.0:调度资源支持弹性伸缩,有效提升资源利用率

背景介绍 在3.10的版本中,Dataphin推出了基于K8s的调度系统R.S-3.0,并在产品中支持了自定义资源组功能,用于实现资源的隔离。该功能支持用户在创建租户和资源组时设置可用的CPU和内存,但是也存在一个问题: 现有的调度资源是按照固定配额进行分配,租户或资源组被创建后将长期持有该资源。因为不同租户或资源组使用资源的周期可能不同,所以会出现某一时刻A资源不足,但是B资源...

Dataphin V5.0:调度资源支持弹性伸缩,有效提升资源利用率
阿里云文档 2025-02-11

如何配置流批一体任务的调度配置

调度配置用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性,配置任务调度周期与生效日期等。本文为您介绍如何配置流批一体任务的调度配置。

阿里云文档 2024-11-28

如何进行逻辑表调度配置

对于逻辑表任务,您需定义任务的调度相关属性,包括调度属性、上游依赖、调度参数等。本文为您介绍逻辑表任务调度的相关内容。

阿里云文档 2024-11-28

如何配置管道调度依赖

Dataphin通过各个节点的调度依赖配置结果,有序的运行业务流程中各个节点,保障业务数据有效、适时地产出。本文为您介绍周期离线管道调度依赖配置说明。

阿里云文档 2024-06-21

如何进行逻辑表调度配置

对于逻辑表任务,您需定义任务的调度相关属性,包括调度属性、上游依赖、调度参数等。本文为您介绍逻辑表任务调度的相关内容。

阿里云文档 2024-06-14

运维调度和监控报警模块的操作权限

本文为您介绍运维调度和监控报警模块的操作权限。

问答 2022-12-05 来自:开发者社区

Dataphin中的同步作业有很长的等待调度时间,这个调度资源能扩容嘛?

Dataphin中的同步作业有很长的等待调度时间,这个调度资源能扩容嘛?

问答 2022-11-23 来自:开发者社区

Dataphin 提供了实例运行诊断的能力,从上游依赖、定时时间、限流规则、调度资源及实例执行 5

Dataphin 提供了实例运行诊断的能力,从上游依赖、定时时间、限流规则、调度资源及实例执行 5 个阶段分析,实例运行过程中可能产生的异常有什么?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。