任务管理
基于时间片的轮转调度 时间片轮转调度使用时间片控制每个任务的执行时间，同等优先级的任务依次获得处理器被调度执行，每个任务可以运行的时间片是固定的，当任务的时间片用完后，该任务被放在对应优先级就绪队列的队尾，然后调度就绪队列...
配置共享GPU调度cGPU算力调度策略
每个容器占用尽量多的时间片，时间片占比为 1/当前容器数。2 权重抢占调度。当ALIYUN_COM_GPU_SCHD_WEIGHT的取值大于1时，自动使用权重抢占调度。3 固定算力调度。用于固定算力的百分比。4 算力弱调度。隔离性弱于抢占调度。5 原生调度。即...
通过Docker安装并使用cGPU服务
每个容器占用尽量多的时间片，时间片占比为 1/当前容器数。2：权重抢占调度。当ALIYUN_COM_GPU_SCHD_WEIGHT的取值大于1时，自动使用权重抢占调度。3：固定算力调度。用于固定算力的百分比。4：算力弱调度。隔离性弱于抢占调度。5：原生调度...
周期任务基本运维操作
周期任务是指在调度系统按照调度配置周期性自动调度的任务。您可以在 运维中心>周期任务 列表查看指定工作空间下的周期任务，并对任务进行运维操作，包括自动调度和手动运行周期任务、查看任务运行详情、暂停任务、下线任务等。本文为您...
如何使单应用支持十万以上的定时任务
应用场景 常见应用场景是每个定时任务调度时间都不一样，无法通过MapReduce分布式任务解决（MapReduce分布式任务每个子任务调度时间是一致的）。物联网智能开关 智能开关可以设置定时开启、关闭，是由用户自定义设置的，所以每个开关的定时...
从Logstore到Logstore
调度时间范围 调度的时间范围，具体说明如下：某时间开始：指定第一个实例被调度的开始时间。特定时间范围：指定实例被调度的起止时间，即定时SQL任务仅在该时间范围内可被执行。重要 实例的调度时间必须在该范围内，超出该范围时，定时SQL...
Spring任务
高级配置参数说明如下：配置名称 意义 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。时区 可以根据实际情况选择不同时区，包括一些常用国家或地区，也包括标准的GMT表达方式。设置相关报警条件和通知渠道等。...
常见问题
运维管理 容器应用服务常见问题 经典应用服务常见问题 中间件 SOFABoot 常见问题 微服务常见问题 微服务故障排查之 DRM 微服务故障排查之限流 微服务故障排查之 RPC 服务网格-故障排查 消息队列常见问题 任务调度常见问题 分布式链路跟踪...
从Logstore到MetricStore
调度时间范围 调度的时间范围，具体说明如下：某时间开始：指定第一个实例被调度的开始时间。特定时间范围：指定实例被调度的起止时间，即定时SQL任务仅在该时间范围内可被执行。重要 实例的调度时间必须在该范围内，超出该范围时，定时SQL...
从MetricStore到MetricStore
调度时间范围 调度的时间范围，具体说明如下：某时间开始：指定第一个实例被调度的开始时间。特定时间范围：指定实例被调度的起止时间，即定时SQL任务仅在该时间范围内可被执行。重要 实例的调度时间必须在该范围内，超出该范围时，定时SQL...
如何使单应用支持十万以上的定时任务
应用场景 常见应用场景是每个定时任务调度时间都不一样，无法通过MapReduce分布式任务解决（MapReduce分布式任务每个子任务调度时间是一致的）。物联网智能开关 智能开关可以设置定时开启、关闭，是由用户自定义设置的，所以每个开关的定时...
OSS对象检查节点
任务配置说明 OSS对象检查节点与普通调度节点一样，需设置调度依赖、调度时间。调度配置及检测的相关说明如下：调度依赖配置 DataWorks上每个节点均需拥有上游依赖，若OSS对象检查节点无实际上游依赖，您可根据空间业务复杂度选择依赖 虚拟...
查看统计图表
调度时间范围 调度的时间范围，具体说明如下：某时间开始：指定第一个实例被调度的开始时间。特定时间范围：指定实例被调度的起止时间，即定时SQL任务仅在该时间范围内可被执行。重要 实例的调度时间必须在该范围内，超出该范围时，定时SQL...
Spring任务
高级配置参数说明如下：配置名称 意义 时间偏移 数据时间相对于调度时间的偏移，可以在调度时从上下文获取该值。时区 可以根据实际情况选择不同时区，包括一些常用国家或地区，也包括标准的GMT表达方式。设置相关报警条件和通知渠道等。...
调度依赖配置指引
任务实际运行时间除了取决于任务本身的定时时间（即任务在调度场景下的预期执行时间）外，还取决于上游任务的完成时间（即下游任务实际执行时间还取决于上游任务的定时时间）。若上游任务未完成运行，即便下游任务的定时时间早于上游任务，...
任务运行诊断
任务实际执行时，除了受数据开发（DataStudio）中定义的定时调度时间影响外，还受多方因素影响。例如，上游任务的定时时间、上游任务实际执行完成时间、任务执行资源组所剩资源等。本文为您介绍如何使用运行诊断功能快速定位任务未运行成功...
MySQL节点
配置时间调度周期、重跑属性和上下游依赖关系，详情请参见 时间属性配置说明 及 配置同周期调度依赖。说明 您需要设置节点的 重跑属性 和 依赖的上游节点，才可以提交节点。配置资源属性，详情请参见 配置资源属性。访问公网或VPC网络的...
使用Java SDK创建定时SQL任务
Cron：通过Cron表达式指定时间间隔，按照指定的时间间隔调度定时SQL任务。interval 50m 当 type 取值为 FixedRate 时，配置固定间隔。3s：间隔3秒。5m：间隔5分钟。2h：间隔2小时。cronExpression 无 当 type 取值为 Cron 时，配置Cron表达...
查看周期实例
周期实例是周期任务达到启用调度所配置的周期性运行时间时，被自动调度的实例快照。您可以通过列表及DAG图的方式，快速查看实例的详细信息并执行相关操作。相关概念 正常任务：即真实执行代码逻辑的任务，不包括空跑（调度属性为空跑的任务...
配置时间调度
本文为您介绍如何在任务编排的任务流页面，进行时间调度配置。应用场景 当任务需要在固定的时间点或时间周期内执行时，可选择时间调度。例如，在2023-08-23至2023-09-30范围内，每周二和周五的00:00，都需要将A数据库的数据迁移到B数据库中...
常见问题
本文介绍定时SQL功能的常见问题。如何保证SQL分析的数据准确性？数据延迟写入或实例的调度配置不恰当时，可能发生数据分析不准确问题。数据写入存在延迟。例如数据写入日志服务延迟了5分钟，实例执行时间为12:03:00，SQL时间窗口为相对一...
名词解释
调度时间 JobInstance每次调度的时间叫做调度时间，JobProcessor可以根据 context.getScheduleTime()获取。数据时间 SchedulerX可以处理有数据状态的任务。创建任务的时候可以填数据偏移。例如一个任务是每天00:30运行，但是实际上要处理上...
调度中心字段说明
调度时间 标识该调度组的调度时间段 调度时间8-22：调度组每天早上8点到晚上22点执行调度。调度时间22-8：调度组每天晚上22点到第二天早上8点执行调度。调度规则 当前调度组内如果有一个任务失败，其它任务是否继续执行 继续：如果当前任务...
故障协同处理（基于钉钉）
节点记录和PC端故障时间线保持一致。复盘 按钮：故障恢复后，需进行故障复盘，点击 复盘 按钮选择复盘人即可。复盘状态不可逆。（3）改进分析 H5界面：改进分析包含原因检查、分析详情和改进措施三个子模块。点击 复盘完成 按钮前需校验三...
Dataphin的调度任务到了设置的调度时间状态还是等待中
可以调整任务优先级后执行强制重跑操作，优先运行当前实例 新版本中（v3.2及以上版本）将“等待中”状态拆分为了“等待调度时间”和“等待调度资源”，可以更直观区分等待原因 V3.5版本开始，支持查看实例运行诊断结果，提示未开始运行的...
查询加速
并发计算提供按时间片和按时间线两种切分模式，并将一个PromQL Query调度到多台机器执行，性能相比单机执行可提升2~10倍。按时间片切分 以下面Query为例，将每2h切分成一个query，即能够启动6个任务并发执行计算，最后将结果进行合并。...
Cron
Cron是一款类Unix的操作系统下的基于时间的任务管理系统。您可以通过Cron在固定时间、日期间隔下运行定时任务（可以是命令和脚本）。Cron表达式 Cron的表达式为：秒 分 时 日 月 周[年]为了帮助您理解，下面介绍一些常用的Cron表达式示例。...
调度参数配置最佳实践
}和$[…]参数的功能差异 调度参数返回值二次处理典型场景 获取上个月最后一天 获取当前季度 获取定时时间15分钟前的年、月、日、小时、分钟 获取时间区间，调度间隔为1天 获取时间区间，调度间隔为1小时 通过赋值节点二次处理调度参数 参数...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
配置离线管道调度
调度配置用于定义周期性调度类型的离线管道任务在调度过程中的调度规则。本文为您介绍如何配置周期性离线管道调度配置。背景信息 依赖关系是两个或多个节点之间的语义连接关系，同时上游节点的状态将影响其他下游节点的运行状态。配置了...
离线任务调度属性配置
调度属性用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置任务的调度属性。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入离线集成...
离线任务调度属性配置
调度属性用于定义节点在生产环境的周期调度方式。您可以通过配置属性中调度属性，配置任务调度周期与生效日期等。本文为您介绍如何配置任务的调度属性。操作步骤 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入离线集成...
配置逻辑表调度属性
逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则。本文为您介绍如何配置维度或事实逻辑表的调度属性。操作步骤 请参见 数据开发入口，进入数据 开发 页面。按照下图操作指引，选择您需配置调度属性的逻辑表，进入 调度配置 信息...
配置逻辑表调度属性
逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则。本文为您介绍如何配置维度或事实逻辑表的调度属性。操作步骤 请参见 数据开发入口，进入数据 开发 页面。按照下图操作指引，选择您需配置调度属性的逻辑表，进入 调度配置 信息...
名词解释
调度时间 JobInstance每次调度的时间叫做调度时间，JobProcessor可以根据 context.getScheduleTime()获取。数据时间 SchedulerX可以处理有数据状态的任务。创建任务的时候可以填数据偏移。例如一个任务是每天00:30运行，但是实际上要处理上...
UpdateSecretRotationPolicy
凭据开启自动轮转后，首次自动轮转的时间为上次轮转时间加上轮转周期。如果该时间早于当前时间，将会立即开始首次自动轮转。本文将提供一个示例，更新名称为 RdsSecret/Mysql5.4/MyCred 的凭据轮转策略。具体如下：将 ...
UpdateSecretRotationPolicy
凭据开启自动轮转后，首次自动轮转的时间为上次轮转时间加上轮转周期。如果该时间早于当前时间，将会立即开始首次自动轮转。本文将提供一个示例，更新名称为 RdsSecret/Mysql5.4/MyCred 的凭据轮转策略。具体如下：将 ...
名词解释
调度时间 JobInstance每次调度的时间叫做调度时间，JobProcessor可以根据 context.getScheduleTime()获取。数据时间 SchedulerX可以处理具有数据状态的任务。创建任务的时候可以填写数据偏移。例如一个任务是每天00:30运行，但是实际上要...
工作原理
如果设置了调度的结束时间，则最后一个实例（调度时间小于调度结束时间）执行完成后，不再产生新的实例。场景四：修改调度配置对生成实例的影响 修改调度配置后，下一个实例按照新配置生成。一般建议同步修改SQL时间窗口、调度频率等配置，...
功能特性
通过故障诊断平台，能够极大地缩短故障排查时间。同时，屏蔽了不同运维人员在故障排查时的经验和技能差异，实现故障的快速定位。应急预案 应急预案 提供了应用运维原子操作的编排能力，如应用重启、应用摘流、数据库切换、物理服务器重启等...
- 产品推荐
- 这些文档可能帮助您