安装和卸载集群软件
在使用E-HPC集群进行高性能计算时，需根据业务需求安装相关软件，本文主要介绍如何在弹性高性能计算控制台上安装和卸载软件...相关文档 您可以通过调用以下API接口来管理集群软件应用。InstallSoftwares-安装软件 UninstallSoftwares-卸载软件
查看已安装的集群软件
本文介绍如何通过弹性高性能计算控制台查看集群中已安装的软件，并获取它们的详细信息，包括软件名称、版本和...具体操作，请参见 安装和卸载集群软件。您也可以调用API接口查看集群已安装软件。具体操作，请参见 ListInstalledSoftwares。
集群可用软件列表
E-HPC提供了业界主流的科学计算应用、编译器运行时库、MPI通信库等软件，本文介绍E-HPC提供的常用软件，以及软件相关的应用场景等。E-HPC支持的软件 本文列出支持通过控制台自动部署的软件，您也可以...具体操作，请参见 安装和卸载集群软件。
ListInstalledSoftwares-查询集群已安装软件
查询集群已安装软件。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用...
ListInstalledSoftware-查询指定集群已安装的软件列表
调用ListInstalledSoftware查询指定集群已安装的软件列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在...
使用IMB软件和MPI通信库测试集群通信性能
本文以IMB软件和MPI通信库为例介绍如何测试E-HPC集群的通信性能。背景信息 IMB（Intel MPI Benchmarks）用于评估HPC集群在不同消息粒度下节点间点对点、全局通信的效率。MPI（Message Passing Interface）是支持多编程语言编程的并行计算...
集群概述
集群是运行高性能计算的节点...管理集群 自动化部署集群环境：查看和修改集群信息 管理集群软件应用 管理集群自定义服务 管理集群共享存储 管理集群资源：管理队列 管理节点 自动伸缩节点 管理集群用户：用户管理 作业调度 提交作业 停止作业
InstallSoftware-安装软件
调用InstallSoftware为指定集群安装软件。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句...
功能特性
管理集群软件应用 自定义服务 安装自定义服务组件，能与集群服务联通，提供额外附加功能和使用界面，以类SaaS化方案帮助用户使用集群资源。管理集群自定义服务 资源管理 计算资源管理 创建和释放不同规格的计算资源，安装配置计算环境和...
手动扩容集群
执行结果 扩容后，新增计算节点会自动安装集群软件并初始化，原有计算节点的使用不受影响。您可以单击 资源管理 节点与队列，在集群列表中选择扩容的集群，在 节点类型 列表中选择 计算节点，即可查看已扩容节点的状态。当该节点状态为 ...
节点
说明 新增计算节点会自动安装集群软件并初始化，原有计算节点的使用不受影响。您可以在节点列表中查看已扩容节点的状态。当该节点状态为 运行中，说明扩容集群已完成。重启节点 如果计算节点出现异常，您可以尝试重启节点。重启分为以下两...
创建标准版集群
自定义选项 配置项 说明 调度器 根据选择的集群类型，以及管理节点配置的镜像，选择要部署的调度器软件。域账号 选择集群部署的域账户服务。域名解析 保持默认。集群后处理脚本 指在集群计算任务完成后，用于处理结果数据或执行其他后续...
Hadoop集群迁移至DataLake集群
您可以根据旧集群软件版本信息，结合以下表格中的信息，确定新集群的服务版本。旧平台集群服务 向下兼容区间1 向下兼容区间2 向下兼容区间3 向下兼容区间4 Spark 2.x 3.x-Hive 2.x 3.x-Tez 全部新旧版本兼容-Delta Lake 0.6.x 0.8.0-1.1.0-...
使用Schrodinger软件计算分子结构
本文介绍如何使用E-HPC集群运行Schrodinger软件来计算分子结构。背景信息 Schrodinger基于物理学的计算平台，集成了用于预测建模、数据分析的差异化解决方案，以实现对化学空间的快速探索，主要应用于药物发现，以及航空航天、能源、半导体...
安装与卸载软件
使用E-HPC集群进行高性能计算时，需要根据业务需求安装相关业务软件。本文介绍如何安装和卸载软件。安装软件 您可以通过控制台直接安装E-HPC提供的常用软件，也可以在集群中手动安装其他软件。通过控制台安装 登录 弹性高性能计算控制台。...
导出和导入服务配置
JSON：可以作为新集群的软件预设配置，使用详情请参见 导入服务配置。单击 确定。导入服务配置 以JSON格式导出的服务配置，可以在创建集群阶段，作为新集群的预设配置。在 EMR on ECS 页面，单击 创建集群。在 软件配置 的 高级设置 区域，...
API概览
ListInstalledSoftwares 查询集群已安装软件 查询集群已安装软件。ListClusters 查询集群列表 查询用户账号中在每个地域拥有的所有集群的列表。ListAvailableImages 查询可用镜像列表 获取E-HPC集群可用镜像列表。ListAvailableFileSystems...
创建Doris集群
高级设置 软件自定义配置：可指定JSON文件对集群中的基础软件（例如Hadoop、Spark和Hive等）进行配置。默认不开启。硬件配置。配置项 描述 付费类型 默认包年包月。当前支持的付费类型如下：按量付费：一种后付费模式，即先使用再付费。...
配置自建RDS
步骤二：创建集群 在创建集群的 软件配置 页面，配置以下参数，其他参数的配置请参见 创建集群。DataLake和Custom集群参数 Hadoop集群参数 描述 元数据 选择 自建RDS。说明 仅当 Custom 集群选择了HDFS、YARN和Hive服务后，元数据 参数才...
创建DataFlow Kafka集群
软件配置。配置项 示例 描述 地域 华东1（杭州）创建的集群将会在对应的地域内，一旦创建不能修改。业务场景 实时数据流场景 选择 实时数据流场景。产品版本 EMR-3.43.1 选择EMR版本后，您可以查看各服务的版本。例如，EMR-3.43.1版本中的...
API概览
ListInstalledSoftware 查询指定集群已安装的软件列表 调用ListInstalledSoftware查询指定集群已安装的软件列表。UninstallSoftware 卸载软件 调用UninstallSoftware卸载指定集群中已安装的软件。存储 API 标题 API概述 ...
弹性高性能计算E-HPC的审计事件
ListInstalledSoftware 查询单个集群下已安装的软件列表。ListInvocationResults 查看交互执行命令执行结果。ListInvocationStatus 查看交互执行命令状态。ListJobs 查询作业列表。ListJobsWithFilters 根据参数获取集群作业详情。...
创建ClickHouse集群
高级设置 软件自定义配置：可指定JSON文件对集群中的基础软件进行配置，详细使用方法请参见 配置自定义软件。默认不开启。硬件配置。配置项 说明 付费类型 默认包年包月。当前支持的付费类型如下：按量付费：一种后付费模式，即先使用再...
创建EMR Studio集群
高级设置 软件自定义配置：可指定JSON文件对集群中的基础软件（例如Hadoop、Spark和Hive等）进行配置，详细使用方法请参见 软件配置。默认不开启。硬件配置。区域 配置项 描述 付费类型 付费类型 默认包年包月。当前支持的付费类型如下：...
创建StarRocks集群
高级设置 不开启 软件自定义配置：可指定JSON文件对集群中的基础软件（例如Hadoop、Spark和Hive等）进行配置。默认不开启。硬件配置。配置项 示例 描述 付费类型 按量付费 默认包年包月。当前支持的付费类型如下：按量付费：一种后付费模式...
创建集群
软件自定义配置 可指定JSON文件对集群中的基础软件（例如Hadoop、Spark和Hive等）进行配置，详细使用方法请参见 配置自定义软件。默认不开启。说明 针对Hive作业并发量的设置，请参见 如何预估Hive作业并发量的上限值？硬件配置 配置项 ...
快速开始使用EMR Kafka
实际业务场景，您也可以使用Kafka Manager或Cruise Control等软件管理集群。使用SSH方式登录Kafka集群的Master节点，详情请参见 登录集群。执行以下命令，创建Kafka Topic。sudo su-kafka kafka-topics.sh-partitions 10-replication-...
集群管理常见问题
解决方法：关闭采集服务日志 创建集群时：在创建集群的软件配置阶段，单击 允许采集服务运行日志。创建集群后：在目标集群的 基础信息 页面的 软件信息 区域，单击 服务运行日志收集状态。验证关闭情况。查看/usr/local/ilogtail/user_log_...
通过数据面集群KubeAPI访问Istio资源
kubectl delete Virtualservice 虚拟服务的名称 场景示例二：使用Helm安装软件 启用集群KubeAPI访问Istio资源功能后，Helm可以使用集群的KubeConfig同时安装软件至集群，安装Istio资源至ASM。获取集群KubeConfig并通过kubectl工具连接集群...
通过控制台快速创建和管理集群
本入门教程介绍如何通过E-HPC控制台快速创建一个公共云标准版的集群并进行管理，帮助您快速...相关文档 您可以通过集群模板快速创建一个预装GROMACS软件的集群，并通过E-HPC Portal快速提交作业。具体操作，请参见 快速开启GROMACS分析任务。
供应链安全
背景信息 软件供应链包括三个阶段：软件研发阶段、软件交付阶段、软件使用阶段，不同阶段的攻击面如下：阶段 攻击面 软件研发阶段 IDE开发工具污染攻击 三方库漏洞和后门攻击 直接源码污染攻击 软件交付阶段 软件存储替换和篡改攻击 传输...
供应链安全
背景信息 软件供应链包括三个阶段：软件研发阶段、软件交付阶段、软件使用阶段，不同阶段的攻击面如下：阶段 攻击面 软件研发阶段 IDE开发工具污染攻击 三方库漏洞和后门攻击 直接源码污染攻击 软件交付阶段 软件存储替换和篡改攻击 传输...
查看集群列表与详情
软件信息 该区域为您展示集群版本、集群类型、软件信息和Hive元数据类型等信息。网络硬件 该区域为您展示可用区、专有网络和硬件配置等信息。安全 该区域为您展示密钥对、ECS实例角色、集群安全组和集群服务角色等信息。相关文档 查看集群...
配置自定义软件
如果您需要调整这些服务的配置项，则可以在集群创建时使用软件自定义配置功能，以修改现有配置或添加新的配置项。使用限制 软件配置操作仅在集群创建时执行一次。操作步骤 登录 E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 ...
实践教程概览
本教程介绍如何使用E-HPC集群运行LAMMPS开源仿真软件，以3d Lennard-Jones melt模型进行工业仿真，并通过可视化的方式查看仿真结果。使用Intel oneAPI编译运行LAMMPS E-HPC集群集成了Intel oneAPI工具包，该工具包结合HPC软件使用，可以...
集群概述
各节点功能如下表所示：节点 说明 登录节点 用于远程登录集群，进行相关操作的节点，操作包括软件调试、编译和安装，以及作业提交等。管控节点 用于管理集群的节点，部署了调度服务和域账号服务。调度服务：主要作用是运行PBS或Slurm等调度...
功能发布记录
2022-06-07 监控作业 2022年5月 功能名称 变更类型 功能描述 发布时间 相关文档 创建集群 优化 为加快集群创建速度，使用控制台向导创建集群的过程中不再支持安装软件，您可以在集群创建完成后，在软件管理页面安装需要的软件。2022-05-16 ...
使用MirrorMaker 2（Dedicated）跨集群同步数据
使用限制 EMR DataFlow集群的Kafka软件的版本为2.12_2.4.1及以上。操作步骤 准备MM2配置文件 mm2.properties 并上传到您的OSS存储。以下配置内容仅作为参考，您需要替换文本中的源集群和目标集群的 src.bootstrap.servers 和 dest....
- 产品推荐
- 这些文档可能帮助您