分布式任务调度 SchedulerX

分布式任务调度 SchedulerX 2.0 是阿里巴巴基于 Akka 架构自研的新一代分布式任务调度平台。您可以使用 SchedulerX 2.0 编排定时任务、工作流任务、进行分布式任务调度

Fixed rate

本文仅介绍在创建调度任务时如何配置Fixed rate定时调度。进入定时配置页签,详情请参见创建调度任务。在创建任务配置向导的定时配置页签中设置定时调度参数,然后单击下一步。在时间类型右侧的列表中选择fixed_rate。在固定频率右侧输入...

Second delay

本文仅介绍在创建调度任务时如何配置Second delay定时调度。进入定时配置页签,详情请参见创建调度任务。在创建任务配置向导的定时配置页签中设置定时调度参数,然后单击下一步。在时间类型右侧的列表中选择second_delay。在固定延迟右侧...

阿里云试用中心,为您提供0门槛上云实践机会!

100+款试用云产品,最长免费试用12个月!拨打95187-1,咨询专业上云建议!
广告

任务管理

您可以在任务管理页面对调度任务进行一些列操作,包括创建、编辑、执行、复制、启禁用和删除,还可以重刷调度任务数据。创建调度任务 注意 创建任务前,请确保您已经创建了任务分组。详情请参见创建应用。登录分布式任务调度平台。在顶部...

如何创建秒级调度任务

本文将以一个实例介绍如何创建秒级调度任务。SchedulerX的秒级别任务属于定时调度类型,适用于简单Java任务、分布式Java任务和脚本任务,以及各种执行方式。由于秒级调度属于定时调度,所以在定时配置步骤中请将时间类型设置为second_delay...

Cron

Cron定时调度配置示例在创建调度任务时可以使用Cron定时调度,创建调度任务的详细操作步骤请参见创建调度任务。本文仅介绍在创建调度任务时如何配置Cron定时调度。进入定时配置页签,详情请参见创建调度任务。在创建任务配置向导的定时配置...

为应用实现任务调度(EDAS部署)

您可以使用SchedulerX 2.0为您部署在EDAS上的独立Java应用、Spring或Spring Boot应用实现分布式任务调度能力。前提条件由于SchedulerX是EDAS的组件,所以在使用SchedulerX为应用接入任务调度能力前,需要先在EDAS完成以下工作: 开通EDAS...

应用配置管理 ACM

应用配置管理(Application Configuration Management,简称 ACM),是一款在分布式架构环境中对应用配置进行集中管理和推送的工具类产品。基于该产品,您可以在微服务、DevOps、大数据等场景下极大地减轻配置管理的工作量,增强配置管理的...

工作流调度

说明 导入Job会弹出导入Job将会移除该Job的定时配置提示框,单击确认,则该Job不会独立调度,会跟随工作流的调度周期进行调度调度任务添加完毕后,按住并拖动任务两侧的端点到其它任务的端点连接调度任务,形成依赖关系,组成完成的工作...

配置审计

配置审计是一项面向资源的审计服务。在面对大量资源时,配置审计可以帮助您实现持续的基础设施的合规监管。

流程管理

流程管理提供可视化的任务编排,您可以使用Crontab创建定时调度工作流,并通过API触发。创建工作流您可以创建工作流调度任务。说明 目前工作流调度仅支持Cron表达式。登录分布式任务调度平台。在顶部菜单栏选择地域。在左侧导航栏单击流程...

产品功能

SchedulerX主要提供调度、执行和运维三方面的功能。多种表达式的定时调度 Crontab:支持Unix Crontab表达式,详情请参见Cron。不支持秒级别。Fixed rate:Crontab必须被60整除,不支持其它数量级时间间隔的任务,每隔40分钟的定时任务。...

什么是分布式任务调度SchedulerX

分布式任务调度SchedulerX是阿里巴巴基于Akka架构自研的新一代分布式任务调度平台,提供定时调度调度任务编排和分布式批量处理等功能。您可以在控制台配置、管理您的定时调度任务、查询任务执行记录和运行日志,还可以通过工作流进行任务...

为应用实现任务调度(非 EDAS 部署)

该分组的 Group ID 将作为应用接入任务调度配置参数。登录。在左侧导航栏中选择组件中心> 分布式任务调度2.0。在分布式任务调度2.0左侧导航栏选择应用管理。在应用管理页面选择地域和命名空间,然后单击创建。在创建应用分组对话框的应用...

创建资源

在使用SchedulerX前,您需要先创建相关资源,包括命名空间、调度任务分组、调度任务和调度工作流。背景信息 资源 说明 使用场景 命名空间 在具体地域(Region)中,命名空间用于实现资源和服务的隔离。当您对资源有较高的安全要求时,需要...

调度配置

本章节为您介绍如何调度配置。前提条件周期调度任务启动成功。背景信息调度配置只针对周期调度的同步任务。操作步骤 登录数据资源平台控制台。在菜单栏左上角,单击图标,选择研发工作台。单击资产加工>>标签同步。在标签同步页面,选中需...

配置调度依赖

调度配置完成后,提交节点时,DataWorks会检查节点的调度依赖与节点代码中的数据血缘关系是否一致,详情可参见调度配置完成后处理。通用配置原则DataWorks的调度依赖配置包括依赖的上游节点和本节点的产出: 本节点的输出指当前节点的输出...

应用管理

在基本配置配置向导页,输入应用名和应用ID,设置高级配置参数(可选),然后单击下一步。参数解释默认值 应用名自定义设置应用名称。无 应用ID应用ID为应用接入的GroupID,保证同一个命名空间下唯一,否则将创建失败,可以和应用名一致。...

调度配置

本文为您介绍如何进行同步任务的调度配置。前提条件已完成同步任务的配置,详情请参见配置同步任务。背景信息 系统仅支持周期性节点的同步任务进行调度配置。依赖关系是两个或多个节点之间的语义连接关系,同时上游节点的状态将影响其他...

调度配置

调度配置用于配置节点在调度过程中的调度规则及依赖关系。本文为您介绍如何配置计算任务的调度参数。前提条件完成创建计算任务: 如果计算引擎为MaxCompute,详情请参见新建MAXC任务。如果计算引擎为ADB for PostgreSQL,详情请参见新建ADB...

和开源产品对比

有开源产品同样可以实现分布式任务调度,本文介绍SchedulerX和开源产品的对比,帮助您更好的了解分布式任务调度和SchedulerX。产品QuartzElastic-JobXXL-JOBApache AirflowSchedulerX 定时调度CronCronCronCron CronFixed rateSecond ...

调度依赖逻辑说明

调度配置页面删除如上图所示,您可以在select了非周期性产出表的节点调度配置的页面中,将自动解析开关选择为否,然后手动删除对应的依赖的上游节点。拉线配置DataWorks支持在业务流程的页面,直接通过连线的方式,指定各个节点的上下游...

如何使单应用支持十万以上的定时任务

本文介绍如何通过一系列配置,使单应用能够支持上万,甚至十万以上的定时任务,并且不同任务能够有独立的调度时间。应用场景常见应用场景是每个定时任务调度时间都不一样,无法通过MapReduce分布式任务解决(MapReduce分布式任务每个子任务...

调度配置

调度配置是配置节点在调度过程中的调度规则及依赖关系。本文为您介绍如何配置事实逻辑表的调度参数。前提条件完成事实逻辑表的创建,详情请参见新建事实逻辑表。背景信息调度配置的权限限制,详情请参见数据开发权限列表。操作步骤 登录...

任务调度

scheduling是在并发系统中将多个相关联的进程调度到不同处理器上同时运行的策略,其最主要的原则是保证所有相关联的进程能够同时启动,防止部分进程的异常,导致整个关联进程组的阻塞。例如,您提交一个批量Job,这个批量Job包含多个任务,...

Agent接入(调度任务)

如果您无需为应用接入调度任务,仅想创建一个独立的脚本调度任务,也可以...start-1g.sh仅为示例,您需要根据任务负载及机器配置情况执行对应的命令,start-2g.sh、start-4g.sh或start-8g.sh。如果您想停止任务调度,可执行stop.sh命令。

脚本任务

接入方式脚本任务支持两种接入方式:嵌在应用进程中 安装schedulerx2-agent 创建方式脚本任务在创建调度任务时编写脚本即可,详情请参见创建调度任务。编写脚本的方式包括创建无参数的Shell任务、带参数的Shell任务、Python任务和Go任务: ...

调度配置

调度配置是配置节点在调度过程中的调度规则及依赖关系。本文为您介绍如何配置维度逻辑表的调度参数。前提条件完成维度的创建,详情请参见新建维度。背景信息调度配置的权限限制,详情请参见数据开发权限列表。操作步骤 登录Dataphin控制台...

SchedulerxWorker配置参数说明

本文介绍SchedulerxWorker配置参数。SchedulerxWorker配置参数说明如下:参数解释默认值 setEndpoint(String endpoint)设置每个Region的地址服务器地址。无 setNamespace(String namespace)设置命名空间的ID。无 setGroupId(String groupId...

如何重刷数据

重刷调度任务如果您的业务发生变更,数据库增加一个字段或者上一个月数据有错误,需要把过去一段时间的任务重新执行一遍,可以重刷调度任务数据。说明 任务和工作流都支持重刷数据(只支持天级别的调度周期)。如果您之前执行的某个调度...

如何重刷数据

重刷调度任务如果您的业务发生变更,数据库增加一个字段或者上一个月数据有错误,需要把过去一段时间的任务重新执行一遍,可以重刷调度任务数据。说明 任务和工作流都支持重刷数据(只支持天级别的调度周期)。如果您之前执行的某个调度...

如何管理应用级别的资源和任务优先级

对于业务规模较大的应用而言,调度的稳定性和核心任务的时效性是至关重要的,需要应用级别的资管管理和任务优先级来保证。本文介绍如何管理应用级别的资源和任务优先级。背景信息一些第三方的资源管理系统(例如Mesos和Yarn),能够实现CPU...

API调度

您可以使用API触发任务调度。API触发的使用方式请参见调用方式。

远程配置

远程配置是面向移动APP的配置管理服务,通过云端管理配置内容,并实时推送更新到客户端,灵活控制应用的功能及UI。

HTTPDNS

HTTPDNS是面向多端应用(移动端APP,PC客户端应用)的域名解析服务,具有域名防劫持、精准调度、实时解析生效的特性。
来自: 首页 >HTTPDNS

配置时间属性

单击右侧的调度配置,在时间属性区域,设置节点的生成实例方式、重跑属性和调度周期等属性。实例生成方式节点的实例生成方式包括T+1次日生成和发布后即时生成: T+1次日生成:全量转实例。每天23:30前提交发布的任务,第二天实例生效。每天...

批量计算

批量计算(BatchCompute)是一种适用于大规模并行批处理作业的分布式云服务。BatchCompute可支持海量作业并发规模,系统自动完成资源管理,作业调度和数据加载,并按实际使用量计费。

云数据库专属集群 MyBase

云数据库专属集群 MyBase 是由多台主机(底层服务器,ECS I2服务器、神龙服务器)组成的集群,相对于全托管数据库,可以实现更灵活的资源调度、更强大的企业级数据库服务、更丰富的权限等。

名词解释

JobInstance每次调度的时间叫做调度时间,JobProcessor可以根据context.getScheduleTime()获取。数据时间 SchedulerX可以处理有数据状态的任务。创建任务的时候可以填数据偏移。例如一个任务是每天00:30运行,但是实际上要处理上一天的数据...

音视频通信

Communication)是阿里云覆盖全球的实时音视频开发平台,提供高可用、高品质、超低延时的实时网络服务,适用于在线教育、互动娱乐、视频会议、保险定损、调度指挥等场景。使用阿里云RTC SDK,您可以在移动、Web、PC等多端快速搭建互通互联...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
产品推荐
云服务器 配置审计 商标 SSL证书 轻量应用服务器 短信服务 移动研发平台
这些文档可能帮助您
什么是配置审计 在线扩容云盘(Linux系统) Nacos Go SDK 概述 产品使用流程 查看黑洞时长 Nacos Spring Cloud

新品推荐

你可能感兴趣

热门推荐

切换为移动版

新人福利专场 阿里云试用中心 企业支持计划 飞天会员助力企业低成本上云 智能财税30天免费试用 云解析DNS新用户首购低至36元/年起 ECS限时升级特惠6.5折