归并节点

本文为您介绍归并节点的概念,以及如何新建归并节点、定义归并逻辑,并通过实践案例为您展示归并节点的调度配置和运行详情。背景信息 归并节点是DataStudio中提供的逻辑控制系列节点中的一类,可以对上游节点的运行状态进行归并,用于解决...

参数节点

参数节点是一种特殊的虚拟节点,用于管理业务流程中的参数和实现参数在任务节点中传递,支持常量参数、变量参数和透传上游节点的参数,需要引用参数的节点直接依赖参数节点即可。本文为您介绍如何创建参数节点,引导您高效使用DataWorks...

删除节点

索引 节点节点释放规则 操作步骤 常见问题 节点节点释放规则 删除节点池时,节点池是否开启了期望节点数,将影响节点的释放行为。开启期望节点数的节点节点池内所有按量付费的节点将会被释放,包年包月的节点不会被释放。如果需要...

do-while节点逻辑原理介绍

节点组成与流程编排 DataWorks的do-while节点是包含内部节点的一种特殊节点,您在创建完成do-while节点时,同时也自动创建完成了三个内部节点:Start节点(循环开始节点)、Shell节点(循环任务节点)、End节点(循环结束判断节点),通过...

配置for-each节点

DataWorks为您提供遍历节点(for-each节点),您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文以一个具体示例,通过for-each节点2次循环遍历赋值节点输出结果,并在每次循环...

新建开发环境场景并运行

说明 在搭建节点流程的过程中,如果上游节点和下游节点需要连线(即上游节点的输出数据要作为下游节点的输入数据),则要求上游节点的输出数据与下游节点的输入数据的数据格式和云计算资源类型必须一致,任意结构(星号(*))和为空的除外...

新建开发环境场景并运行

说明 在搭建节点流程的过程中,如果上游节点和下游节点需要连线(即上游节点的输出数据要作为下游节点的输入数据),则要求上游节点的输出数据与下游节点的输入数据的数据格式和云计算资源类型必须一致,任意结构(星号(*))和为空的除外...

配置同周期调度依赖

依赖某节点同周期指本节点本周期运行,依赖上游节点当前周期的数据产出情况(即任务执行情况),待上游当前周期实例执行成功后,本节点才会运行。通常,若当前任务需依赖上游任务同周期产出的表数据时,可为当前任务设置依赖该上游任务的同...

节点诊断

容器智能运维平台 提供节点诊断功能,帮助您诊断集群中存在异常的节点。本文介绍节点诊断对应的检查项以及修复方案。容器智能运维平台 构建了基于专家经验的故障诊断系统,并基于海量数据训练了AI智能故障诊断模型。基于专家经验和AI智能...

数据开发

开发环境节点 支持节点任务类目的新建、编辑和删除以及支持离线、在线和流式节点注册,对节点脚本、自定义函数、节点输入、节点输出、节点变量进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的部署、运行和上线。支持节点任务...

节点部署架构

PolarDB 集群版 的主可用区内包含了多个节点(计算节点),其中一个节点是主节点,其他节点为只读节点。使用限制 仅 PolarDB 集群版 支持多节点。更多关于产品系列的功能对比,请参见 企业版产品系列。多节点架构 每个 PolarDB 集群都包含...

CreateFileSystem-创建文件系统

nasFile EnsRegionId string 是 节点 ID。cn-suzhou-telecom StorgeType string 是 存储类型,取值:capacity。capacity ProtocolType string 是 存储协议。取值:nfs/smb。nfs NetworkId string 是 VPC 网络的 ID 号。vpc-xxx ...

功能简介

开发节点 支持节点任务类目的新建、编辑和删除以及支持离线节点、在线和流式节点注册,对节点脚本、自定义函数、节点输入、节点输出、节点参数进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的运行和上线。支持节点任务类目的...

扩缩容节点

容器服务ACK通过调整节点池的期望节点数实现节点池扩缩容,将节点数目维持在期望数量。扩容节点池保证节点数量足够支撑业务运行,缩容节省成本。扩缩容节点池均可自动化执行,提升了运维效率。本文介绍如何扩缩容节点池。前提条件 已创建...

依赖关系

这样自动解析可以根据唯一的输出找到唯一的节点挂上节点依赖关系,所以如果实际场景有多个节点产出数据至同一张表,那么需要确定下游节点自动解析这张表时应该挂哪个节点依赖(哪个节点最晚写入这张表数据,确保下游节点取数无问题即可),...

MongoDB只读节点简介

只读节点与从节点的区别 节点 说明 适用场景 只读节点(ReadOnly)只读节点具有高可用保障,即某个只读节点故障时,系统会自动将其与隐藏节点切换,若未自动切换,您可以自行切换,只读节点的连接地址保持不变。说明 如何切换只读节点和...

删除或变更节点输出的影响

注意事项 若本节点存在下游依赖,删除本节点节点输出:当下游仅存在一个父节点依赖,可能会导致下游节点成为 孤立节点 不能正常调度。当下游节点还未形成依赖,导致早于上游节点产出表数据,从而产生数据质量问题。因此,存在输出变更的...

分支节点实现特定时间执行任务

分支节点与其它控制节点 在 数据开发 页面,您可以看到当前版本的DataWorks支持的赋值节点、分支节点和归并节点等控制节点。各类型控制节点的作用如下:赋值节点:您可以通过赋值节点把自己的结果传给下游,详情请参见 赋值节点。赋值节点...

增加或删除节点

新增的只读节点的CPU规格与主节点CPU规格对应规则如下:主节点CPU规格(core)允许只读节点最小CPU规格(core)2 2 4 4 8 4 16 8 32 16 64 32 88 32 节点高可用切换不支持切换到和主节点规格不一致的只读节点节点费用 增加节点时的计费...

功能简介

开发节点 支持节点任务类目的新建、编辑和删除以及支持离线节点、在线和流式节点注册,对节点脚本、自定义函数、节点输入、节点输出、节点参数进行配置和管理以及支持配置节点的依赖关系以及支持节点任务的运行和上线。支持节点任务类目的...

增加或删除节点

新增的只读节点的CPU规格与主节点CPU规格对应规则如下:主节点CPU规格(core)允许只读节点最小CPU规格(core)2 2 4 4 8 4 16 8 32 16 64 32 88 32 同一集群中,确保至少有一个只读节点与主节点规格保持一致。开启热备 后的只读节点需要与...

查看节点详情

节点中可用实例数量的比重(x)节点状态颜色 说明 x=1 绿色 节点可用 1/3黄色 节点部分可用 x≤1/3 红色 节点不可用 节点基本配置 在 基本配置 区域中,您可以查看以下信息:节点环境:当前节点的环境。节点名称:当前节点的名称,可编辑。...

API概览

终端节点连接 API 标题 API概述 EnableVpcEndpointConnection 接受终端节点连接请求 调用EnableVpcEndpointConnection接口,终端节点服务接受终端节点的连接请求。UpdateVpcEndpointConnectionAttribute 修改终端节点连接的属性 调用...

移除节点

如果节点池设置了期望节点数,那么节点池为了能够将节点个数维持在期望节点数,会根据相应节点池配置自动扩容其他实例至节点池,以达到期望节点数。操作步骤 登录 容器服务管理控制台,在左侧导航栏选择 集群。在 集群列表 页面,单击目标...

高级应用:实现复杂作业逻辑

使用DataWorks周期性调度MaxCompute作业时,您也可以灵活使用DataWorks已有的通用节点,例如虚拟节点、分支和归并节点、循环类节点等,与MaxCompute的其他节点联合使用可实现更复杂的业务效果,本文为您概要介绍常用的通用节点和典型应用...

托管节点节点自动恢复

托管节点池自动监控节点状态,确保节点正常运行。当节点发生异常时,ACK会自动执行恢复操作。将节点池设置为托管模式会为所有节点同时开启自动恢复功能。本文介绍节点自动恢复的应用场景和处理流程。前提条件 已创建托管节点池或开启托管...

读写分离架构

代理节点(Proxy server)客户端和代理节点建立连接后,代理节点会自动识别客户端发起的请求类型,按照权重分发流量(各节点权重相同,且不支持自定义权重),将请求转发到不同的数据节点中。例如将写请求转发给主节点,将读请求转发给主...

配置节点上下文

注意事项 节点上下文参数仅用于上游节点节点上下文 输出参数作为下游节点节点上下文 输入参数,无法直接将上游节点的查询结果传递到下游,如果您需要将上游节点的查询结果传递到下游节点,可以使用赋值节点,详情可参见文档:赋值...

节点节点池FAQ

本文为您介绍节点节点池常见问题。例如,如何更改节点的Pod数量,如何更换节点池的OS镜像,如何解决节点相关timeout问题等。如何更换节点池OS镜像?是否支持关闭期望节点数功能?开启期望节点数与未开启期望节点数的节点池有什么不同?...

读写分离版

代理节点(Proxy server)客户端和代理节点建立连接后,代理节点会自动识别客户端发起的请求类型,按照权重分发流量(各节点权重相同,且不支持自定义权重),将请求转发到不同的数据节点中。例如将写请求转发给主节点,将读请求转发给主...

for-each节点逻辑原理介绍

节点组成与流程编排 DataWorks的for-each节点是包含内部节点的一种特殊节点,您在创建完成for-each节点时,同时也自动创建完成了三个内部节点:Start节点(循环开始节点)、Shell节点(循环任务节点)、End节点(循环结束判断节点),通过...

监控概述

PrivateLink 通过监控终端节点和终端节点服务相关的带宽、包速率信息,帮助您实时分析和排查网络拥堵和丢包问题。本文介绍 PrivateLink 的监控对象与指标类别。私网连接监控项 私网连接的监控对象和监控指标,如下图所示:监控对象 私网...

创建节点

隐私计算节点可以存储项目中的原始数据,实现机构原始数据的连接及本地计算。本文介绍在蚂蚁隐私计算服务平台中,创建隐私计算节点的方法。前提条件 您已开通蚂蚁隐私计算服务平台。产品开通流程,请参见 开通指南。操作步骤 以下是通过...

计费项

本盘节点规格 单可用区实例 多可用区实例 包年包月 按量付费 本盘节点规格费用=(宽表节点数量+搜索节点数量+文件节点数量+时序节点数量)×本盘节点单价×订购或使用时长。增值服务费用 计费项 适用范围 计费方式 计费规则 LTS备份空间 单...

ListBuckets-查询存储空间列表

2022-10-12T05:45:00Z LogicalBucketType string 单节点存储,取值:sink sink ModifyTime string Bucket 修改时间。按照 ISO8601 标准表示,并需要使用 UTC 时间,格式为 yyyy-MM-ddTHH:mm:ssZ。2022-10-12T06:45:00Z EnsRegionId string ...

添加外部节点

您在其他云平台完成Quorum节点的创建后,您需要获取到该节点的以下信息:IP:Quorum节点节点tx-manager的公网IP地址 TMPort:节点tx-manager的服务端口 P2pPort:Quorum节点的P2P通信端口 TMPub:节点tx-manager使用的身份公钥 NodePub:...

场景:节点孤立

孤立节点节点在 周期任务 或 周期实例 处展开父节点时,没有依赖任何父节点,这类型节点在自动调度时不会被调起,所以孤立节点不会自动调度运行,如果该孤立节点下游依赖较多,可能会造成比较严重的后果。孤立节点产生后会自动报警,如果...

节点伸缩概述

当集群的容量规划无法满足应用Pod调度时,您可以使用ACK提供的节点伸缩功能,自动扩缩节点资源以进行调度容量的补充。ACK目前提供 节点自动伸缩 与 节点即时弹性 两种弹性方案,后者相较于前者有着更快的弹性速度、更高的交付效率和更低的...

新建Blink类型的公共节点

Blink节点是流式节点,运行于Blink云计算资源之上,支持对DataHub Service、AnalyticDB MySQL、Table Store、MaxCompute、AnalyticDB PostgreSQL和RDS MYSQL类型的数据源进行处理。本文介绍如何新建Blink类型的公共节点。操作步骤 方式一:...

诊断节点

诊断节点是诊断决策树的子节点,通过节点之间的关联,实现一棵完整的决策树。新建节点 登录高可用管理控制台。在左侧导航栏上,单击 故障诊断>诊断节点。单击 新建,在 新建节点 页面,配置新节点的信息,包括节点名称、描述,选择节点类型...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
物联网平台 边缘节点服务 ENS 安全加速 SCDN (文档停止维护) 钉钉会议 CDN 弹性公网IP
新人特惠 爆款特惠 最新活动 免费试用