扩容集群
说明 在集群扩容时，需要知道当前集群中待扩容机器组的GroupId。此参数需要您通过OpenAPI从集群信息中解析获取。示例 Java和Python示例如下：Java 根据集群所在Region和集群ID，获取该集群的Task机器组的GroupId。import ...
集群扩容
HostGroup.N.HostGroupId String 否 G-48E83B43E971*待扩容的机器组ID。HostGroup.N.HostGroupName String 否 任务实例组 机器组名称。HostGroup.N.Comment String 否 无 保留字段，无需填写。HostGroup.N.CreateType String 否 无 保留...
扩容ClickHouse集群
在 节点管理 页面，单击目标机器组操作列的 扩容。在 扩容 对话框中，根据实际情况修改相应参数。参数 描述 扩容方式 分片（shard）扩容 当集群容量不能满足业务需求时，可以进行分片扩容。副本（replica）扩容 当集群并发访问量不能满足...
使用指定实例属性方式配置伸缩配置
执行伸缩活动时，伸缩组扩容的实例规格可能是符合要求的实例规格中的任何一种，您可以针对匹配出的实例规格进行排除。使用 指定实例属性 方式能有效解决以下难题：如果伸缩配置仅指定了一个或多个实例规格，但扩容时指定的实例规格已下线...
弹性伸缩任务提示“Abandon lifecycleActionResult ...
问题原因 伸缩组配置了扩容（ScaleOut）类型的生命周期挂钩（LifecycleHook），当伸缩组扩容时，生命周期挂钩被触发，并且生命周期挂钩最终的执行结果为拒绝，导致扩容伸缩活动回滚，扩容出来的ECS实例被释放。解决方案 请检查生命周期挂钩...
多可用区同时快速弹性扩容
但这种在一个伸缩组上配置多个可用区vSwtich的模型特点，会导致以下问题：当多可用区业务Pod出现由于集群资源不足无法调度时，节点自动伸缩服务会触发该伸缩组扩容，但是无法将需要扩容的可用区与实例的关系传递到ESS弹性伸缩组，因此可能...
多可用区同时快速弹性扩容
但这种在一个伸缩组上配置多个可用区vSwtich的模型特点，会导致以下问题：当多可用区业务Pod出现由于集群资源不足无法调度时，节点自动伸缩服务会触发该伸缩组扩容，但是无法将需要扩容的可用区与实例的关系传递到ESS弹性伸缩组，因此可能...
为什么没有调用数的指标统计？
问题现象 在扩容机器时，某台机器的请求数、错误数、异常数均为0，但这台机器的JVM指标监控等数据又是正常的。解决方案 确认这台机器的JVM内存、CPU等资源占用是否比其他机器都要明显的低。如果这台机器的资源占用比其他机器明显的低，那么...
管理节点组（Hadoop、Data science和EMR Studio集群）
相关文档 如果需要给节点组扩容，详情请参见 扩容集群。如果需要给节点组缩容，详情请参见 缩容集群。如果需要给磁盘扩容，详情请参见 扩容磁盘。如果需要配置弹性伸缩规则，详情请参见 配置弹性伸缩（仅Hadoop集群类型）。如果需要查看...
应用场景
游戏单元化批量开服 在游戏场景中，往往会有一套标准的扩容流程来应对游戏用户的增长，每次扩容都有一套标准的基础设施部署配置过程，例如：一组扩容包含5台ECS，部署在固定的网络及安全组中，每个ECS绑定NAT网关，配置DNAT/SNAT规则，EIP...
消息通知概述
MNS队列事件通知示例 您创建了一个事件通知，通知方式为 MNS队列，选择与伸缩组同地域下创建的MNS队列后，事件通知类型为 失败的弹性扩张活动、弹性伸缩组扩容伸缩活动开始。在伸缩组执行弹性扩张活动失败后，MNS队列会收到事件通知并根据...
使用性能指标作为弹性伸缩的度量单位
扩缩容规则 总容量<期望容量，或者总容量<最小容量时，触发伸缩组扩容。总容量≥(期望容量+最大权重)时，触发伸缩组缩容。说明 伸缩组优先根据扩缩容策略进行弹性伸缩，如选择成本优化策略时，按照权重单价从低到高创建实例，按照权重单价...
扩容磁盘
当E-MapReduce集群的数据存储空间不足时，您可以根据本文进行磁盘（数据盘）扩容。本文为您介绍如何对数据盘进行扩容。...扩容完成后，您可以在机器组的磁盘信息列查看扩容后的数据盘信息。说明 如果扩容没有生效，请重启对应的ECS实例。
扩容磁盘
磁盘扩容完成后，在 主机信息 区域，实例组会显示 扩容磁盘已完成，重启机器组生效。注意 磁盘扩容成功后，您需要重启集群以使磁盘扩容生效。重启集群会重启集群中的ECS实例，ECS实例重启过程中大数据服务不可用，请确保在不影响业务的情况...
管理节点组
相关文档 如果需要给节点组扩容，详情请参见 扩容集群。如果需要给节点组缩容，详情请参见 缩容集群。如果需要给磁盘扩容，详情请参见 扩容磁盘。如果需要配置弹性伸缩规则，详情请参见 添加弹性伸缩规则。如果需要查看弹性伸缩记录，详情...
YARN资源配置
EMR会在创建集群和新增节点组第一次扩容时会配置一次 yarn.scheduler.maximum-allocation-mb，保证该值大于创建集群时所有节点和新增节点组扩容时扩容节点的 yarn.nodemanager.resource.memory-mb，避免作业无法调度。节点组升配或者手动...
实例配置来源概述
实例配置来源是伸缩组扩容ECS实例或ECI实例时使用的实例配置模板。自动扩容时，伸缩组根据实例配置来源创建ECS实例或ECI实例，并将创建的实例添加到伸缩组。实例配置来源简介 伸缩组内只能有一项生效的实例配置来源。例如，选用一条新的...
Serverless Spark概述
弹性能力不足：在业务高峰期，企业往往需要能够准确预估资源需求，并及时扩容机器。如果扩容过多，则会存在资源浪费，如果扩容过少，则会影响业务。而且集群扩容过程较复杂，时间也会较长，并且云上容易出现资源库存不足的问题。解决方案 ...
功能特性
管理节点组 节点组扩容 当E-MapReduce集群计算资源或存储资源不足时，您可以通过水平扩展Core节点和Task节点来满足需求。扩容集群 节点组缩容 当E-MapReduce集群的计算资源过剩时，您可以缩减Task节点的数量。缩容集群 节点组磁盘扩容 当E-...
排查伸缩活动异常
伸缩组配置了扩容（ScaleOut）类型的生命周期挂钩（LifecycleHook），当伸缩组扩容时，生命周期挂钩被触发，并且生命周期挂钩最终的执行结果为拒绝，导致扩容伸缩活动回滚，扩容出来的 ECS 实例被释放。建议：请检查生命周期挂钩的执行策略...
ScaleWithAdjustment-基于指定调整规则触发性扩缩容
false Overrides object 否 ECI 伸缩组扩容指定覆写参数。Cpu float 否 实例级别 vCPU 大小。单位：核。2 Memory float 否 实例级别内存大小。单位：GiB。4 ContainerOverrides object[]否 覆写容器列表参数。Name string 否 容器名称。当...
ScaleWithAdjustment
Overrides Object 否 ECI类型的伸缩组扩容指定覆写参数。Cpu Float 否 2 实例级别vCPU大小。单位：核。Memory Float 否 4 实例级别内存大小。单位：GiB。ContainerOverride Array 否 覆写容器列表参数。Name String 否 container-1 容器...
扩缩容操作
扩容操作 本文以独享调度资源组为例，为您介绍如何进行资源组扩容，独享数据集成资源组的扩容操作类似。进入 资源组列表 页面。登录 DataWorks控制台。在左侧导航栏，单击 资源组列表，选择目标地域。在 独享资源组 页签，鼠标悬停至目标...
扩容逻辑卷
sudo vgs 回显类似如下信息，卷组 vg_01 的容量由59.99 GiB增加至79.99 GiB，说明卷组扩容成功。扩容逻辑卷和文件系统。运行以下命令，获取逻辑卷路径、名称、所属卷组等信息，后续操作步骤需使用。sudo lvdisplay LV Path：逻辑卷路径，...
集成环境ADP底座节点如何扩容
2、执行扩容命令 cd/root/workspace/clusters./trident apply-f trident-xxx.yaml 线下环境 1、进入产品包解压目录 2、编辑global.yaml，masters和nodes添加需要扩容机器的ip。3、执行离线部署安装命令./hopctl install-p `pwd` Trident...
扩容集群
后续操作 当您扩容的节点组为Core节点组，且使用本地HDFS作为存储时，如果在扩容流程结束后发现HDFS出现数据不平衡的情况，请使用HDFS Balancer重新分配DataNode中的数据，详情请参见 HDFS Balancer。相关文档 当节点组内ECS实例的规格...
设置有序且唯一的实例名称或主机名称规则
背景信息 根据伸缩规则，伸缩组支持一次扩容一台或者多台ECS实例，也可以多次扩容生成多台ECS实例。您可以在伸缩配置或者启动模板中设置实例名称或主机名称的规则。不同场景下，设置实例名称或主机名称规则的方案有所差异（如下表所示），...
CreateAutoscalingConfig-创建弹性伸缩配置
当自动伸缩进行扩容时，实时读取此配置，将可扩容的伸缩组 ID 与配置中伸缩组 ID 进行匹配，在匹配上的伸缩组中选取优先级最大值的伸缩组作为扩容对象。least-waste skip_nodes_with_system_pods boolean 否 cluster autoscaler 是否缩容有...
CreateAutoscalingConfig-创建弹性伸缩配置
当自动伸缩进行扩容时，实时读取此配置，将可扩容的伸缩组 ID 与配置中伸缩组 ID 进行匹配，在匹配上的伸缩组中选取优先级最大值的伸缩组作为扩容对象。least-waste skip_nodes_with_system_pods boolean 否 cluster autoscaler 是否缩容有...
主机环境部署运维
观测扩缩过程 扩容 主机环境扩容场景，将执行以下两步：部署组扩容：把待扩容的机器加入到本环境关联的部署组。部署新增机器：使用环境最近一次部署版本部署新扩容的机器。缩容 主机环境缩容场景，将执行以下两步：服务下线：在待缩容机器...
云速搭部署VMware服务
数据中心扩容：业务扩容遇到机器过保、机房空间限制等情况，不希望一次性高昂的基础资源投入。上云迁移场景：客户不想继续维护本地VMware 数据中心，实现整体VMware数据中心迁移上云。部署架构 方案详情 具体内容请参考《云速搭CADT部署...
使用弹性强度评估资源可用性
本文介绍如何查看伸缩组的弹性强度，并通过增加弹性强度来提高伸缩组的扩容成功率。背景信息 实例配置来源是扩容时ECS实例使用的模板，指定了ECS实例的可用区和实例规格。可用区和实例规格组合定义了一个资源池，实例配置来源中指定的可用...
基于启动模板配置多个实例规格的伸缩组
启动模板+多实例规格 模式伸缩组扩容后，即按量付费启动模板（实例规格为 ecs.g6.large）+多实例规格（扩展的多实例规格为 ecs.g5ne.large）模式的伸缩组扩容后，扩容的实例规格为 ecs.g5ne.large。效果对比 相比较单个 启动模板 模式的...
使用专属资源组
本文为您介绍如何创建专属资源组、管理专属资源组、管理专属资源组中的机器实现扩缩容等功能。背景信息 您可以将模型服务部署到专属资源组，在部署服务数量相对较多，对服务实时性要求比较高的场景，需要使用专属资源组来保障模型服务能...
实例类型
创建集群完成后，您可以通过扩容来增加实例组内的机器数量（主实例组除外）。说明 EMR-3.2.0及后续版本支持计算实例节点（Task）。主实例节点（Master）主实例节点是集群服务部署管控等组件的节点，例如，Hadoop YARN的 ResourceManager。...
目标追踪规则
例如，当前组内实例数量为2个，伸缩组触发扩容活动后添加5个实例到伸缩组，预热时间设置为300秒，在实例预热期间，伸缩组再次触发扩容活动后，仍按照实例数量为2个作为扩容实例的基数。伸缩组在缩容过程中，会自动根据历史执行情况设置合适...
续费
CDP集群支持用户按照购买的订单组进行分组续费（如初始实例组，扩容实例组1，扩容实例组2等）。续费操作步骤 登录 阿里云CDP控制台。在左侧菜单栏选择 集群管理 页签。在 集群管理 页面，单击相应集群所在行的 续费 操作或 集群名称。在 ...
常见咨询问题
扩容的机器与原机器的磁盘名称及大小不一致（阿里云直接购买通配置机器时容易发生）。需调整为一致。Minio由于LVM容量不足启动失败是什么原因？原因是磁盘的存储不够，导致trident没有分配足够的LVM，需要根据Minio的LVM需求，扩容数据盘。...
使用ECI类型伸缩组的成本优化功能
计费原理 ECI类型的伸缩组开启成本优化功能后，伸缩组在扩容前会进行ECI实例询价、ECS实例规格匹配、价格对比等措施，根据您应用的ECI配置来自动匹配价格更低的指定ECS规格来创建ECI实例。具体规则如下：当 ECS规格匹配 且 ECS规格单价实例...
添加弹性伸缩规则
注意事项 您可以为满足条件的节点组添加弹性伸缩规则，当规则触发后，节点组会按照规则预置的策略自动进行节点组的扩容或缩容。如果不设置规则，则不会触发弹性伸缩活动。系统会根据您选择的vCPU和内存规格，自动匹配出满足条件的实例，并...
- 产品推荐
- 这些文档可能帮助您