监控存储资源
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理 共享存储。在 共享存储 页面，选择目标集群，单击 资源 监控 页签。在 资源监控 页签下，设置并查看存储资源的相关监控数据。配置项 说明 文件...
HDFS数据源
附录：脚本Demo与参数说明 离线任务脚本配置方式 如果您配置离线任务时使用脚本模式的方式进行配置，您需要按照统一的脚本格式要求，在任务脚本中编写相应的参数，详情请参见 通过脚本模式配置离线同步任务，以下为您介绍脚本模式下数据源...
使用HPL测试集群浮点性能
HPL通过对高性能计算集群采用高斯消元法求解一元N次稠密线性代数方程组的测试，评价高性能计算集群的浮点计算能力。浮点计算峰值是指计算机每秒可以完成的浮点计算次数，包括理论浮点峰值和实测浮点峰值。理论浮点峰值是该计算机理论上每秒...
通过HDFS Shell连接并使用LindormDFS
HDFS Shell是Hadoop分布式文件系统（HDFS）提供的命令行工具。LindormDFS（Lindorm底层存储，LDFS）100%兼容HDFS协议，您可以通过HDFS Shell工具交互式管理LDFS中存储的文件，例如文件查询、文件删除、文件权限管理和修改文件名称等。本文...
账单查询
本文介绍如何在 费用与成本控制台 查询E-HPC相关费用账单和消费明细。操作步骤 登录 弹性高性能计算控制台。在顶部导航栏，单击 费用。在费用与成本中心的左侧导航栏，选择 费用 账单 账单详情。根据需要，单击相应页签查询账单。各页签...
API概览
UpdateServerGroupServersAttribute 更新后端服务器配置 更新网络型负载均衡服务器组中后端服务器的权重和描述信息。ListServerGroups 查询服务器组 查询网络型负载均衡实例的服务器组列表。ListServerGroupServers 查询服务器 查询网络型...
产品优势
优势 简单易用 一键启动服务器和应用 一站式的应用管理和运维 丰富的应用集成 高性价比 性能高：轻量应用服务器使用满足市场主流应用需求的高性价比系统盘，读写性能相对稳定。价格低：相同配置下，相比单独购买云资源，轻量应用服务器套餐...
伸缩集群
当E-HPC集群面临计算节点资源不足或过多的问题时，您可以根据实际需求手动扩缩容集群，或者配置集群自动伸缩功能，无需手动操作即可实现扩缩容，以满足业务需求。本文介绍E-HPC伸缩集群的相关概念和功能。手动扩缩容 在E-HPC集群中，手动扩...
选购资源包
文件系统类型 计费项 资源使用量 推荐资源包规格 通用性能型NAS 通用型存储容量（容量型/性能型）60 GiB 存储容量的总和为60 GiB*5.47+380 GiB*0.43=491.6 GiB 资源包类型：通用型NAS资源包 地域：华东1（杭州）通用型基准容量：500 GiB ...
部署Java Web环境
方式 适用场景 云市场镜像部署Java Web环境 如果您希望省去安装配置服务器的过程，可以使用已集成相关环境的云市场镜像部署Java Web服务器。手动部署Java Web环境（Alibaba Cloud Linux 3/2、CentOS 7.x）对于有特殊需求或想要深入了解每个...
网络开通流程
您需要开通网络连接以便访问公网或VPC中的目标服务（例如指定IP或域名、RDS、HBase集群、Hadoop集群等）。本文为您介绍MaxCompute与目标服务间的网络结构及支持的网络开通方案。免责声明 MaxCompute提供的公网与VPC访问能力目前属于免费...
指定算力类别创建实例
对于性能需求较高的业务场景，可以选择通用型规格，该类别规格性能更优，并且与未指定算力类别相比，性能表现更稳定。为了避免库存不足的情况，如果您的业务对性能波动有一定的容忍，可以指定多个算力类别来保证高可用。规格说明 ECI支持的...
创建高性能计算优化型实例
高性能计算优化型实例（简称HPC优化实例）是专为提升HPC工作负载性能，同时优化大规模运行成本而打造的最具性价比的实例。操作步骤 登录 ECS管理控制台。在左侧导航栏，选择 实例与镜像 实例。单击 创建实例。按需选择付费类型、实例规格及...
指定算力类别创建Pod
对于性能需求较高的业务场景，可以选择通用型规格，该类别规格性能更优，并且与未指定算力类别相比，性能表现更稳定。为了避免库存不足的情况，如果您的业务对性能波动有一定的容忍，可以指定多个算力类别来保证高可用。规格说明 ECI支持的...
性能基线配置
在压测开始前，您需要配置性能基线，为系统性能提供参照点，用于判断压测是否通过以及系统性能是否符合要求，帮助您评估系统在长时间运行下的可靠性和稳定性。本文介绍如何设置以及使用性能基线功能。设置性能基线 登录 PTS控制台，选择 ...
ECS配额管理
弹性裸金属服务器概述（不包含GPU计算型弹性裸金属服务器实例规格）q_ecs_hpc_spot_c 抢占式的高性能计算实例（hpc、scc）vCPU数量上限 高性能计算优化型实例规格族hpc8ae 高性能计算优化型实例规格族hpc7ip 高性能计算优化型实例规格族hpc...
使用自定义镜像创建服务器
您可以通过已配置好的自定义镜像，创建一台或多台相同或更高配置的轻量应用服务器。前提条件 已创建自定义镜像。具体操作，请参见 创建自定义镜像。注意事项 您在操作前，请阅读以下注意事项：创建的轻量应用服务器仅支持使用相同地域下的...
使用Fuse-DFS挂载文件存储 HDFS 版
vim hadoop-2.8.5-src/hadoop-hdfs-project/hadoop-hdfs-native-client/src/main/native/fuse-dfs/fuse_options.c 执行以下命令编译Hadoop源码中hadoop-hdfs-project模块下的hadoop-hdfs-native-client子模块。cd hadoop-2.8.5-src/mvn ...
自定义镜像概述
您可以通过已配置好的自定义镜像创建更多包含相同配置的轻量应用服务器，也可以将自定义镜像共享至云服务器ECS，进而通过共享镜像创建ECS实例或更换操作系统。自定义镜像生命周期 当您通过服务器快照创建完成自定义镜像后，可以将镜像共享...
计费常见问题
轻量应用服务器的计费项主要包括套餐配置费用、数据盘费用、超额流量费用。更多信息，请参见 计费项。创建快照和自定义镜像是否收费？在轻量应用服务器中创建快照和自定义镜像都不收取费用，但存在以下限制：快照：每台轻量应用服务器最多...
常见问题
集群配置问题包括：内存参数是否合理、跨集群联通性是否正确、安全集群访问是否通过、principal是否正确等等，作业问题包括作业描述文件格式是否正确、输入数据是否能够正常被解析，以及一些其他的作业相关的配置（例如ioConfig）。...
搭建与管理（基于Hadoop）
通过MaxCompute与Hadoop构建湖仓一体方案旨在实现对海量数据的统一管理、存储和分析，提供了一个既能处理结构化、半结构化数据，又能满足高并发分析需求的一体化数据平台。本文为您介绍如何通过MaxCompute与Hadoop构建湖仓一体，以及管理湖...
ALB服务器组包含至少两台服务器
应用场景 ALB服务器组中包含多台服务器，可以组成高性能、高可用的服务器组，提升业务稳定性。风险等级 默认风险等级：高风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 ALB服务器组中至少包含两台服务器，视为“合规”...
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
ES-Hadoop是Elasticsearch推出的专门用于对接Hadoop生态的工具，可以让数据在Elasticsearch和Hadoop之间双向移动，无缝衔接Elasticsearch与Hadoop服务，充分使用Elasticsearch的快速搜索及Hadoop批处理能力，实现交互式数据处理。...
SLB实例默认服务器组包含至少两台服务器
应用场景 SLB实例的默认服务器组中包含多台服务器，可以组成高性能、高可用的服务器组，提升业务稳定性。风险等级 默认风险等级：高风险。当您使用该规则时，可以按照实际需求变更风险等级。检测逻辑 SLB实例的默认服务器组至少添加两台...
搭建Hadoop环境
sudo sh-c 'echo"export JAVA_HOME=usr/java8"/opt/hadoop/etc/hadoop/yarn-env.sh' sudo sh-c 'echo"export JAVA_HOME=usr/java8"/opt/hadoop/etc/hadoop/hadoop-env.sh' 执行以下命令，测试Hadoop是否安装成功。hadoop version 返回类似...
查询文件系统详情
您可以通过控制台查看当前已创建的文件系统详情，例如查看各地域文件系统资源使用量、文件系统性能、ECS实例挂载状态等信息。查询文件系统资源使用量 您可以通过以下方式快速查询当前阿里云账号下文件系统资源使用量，例如容量型或性能型...
访问HBase HDFS
创建一个Hadoop客户端配置目录conf（如果使用客户端已存在这个目录则不需要另行创建）。添加以下两个HDFS配置到Hadoop客户端conf目录中。core-site.xml configuration property name fs.defaultFS/name value hdfs:/hbase-cluster/value/...
快速入门
使用弹性高性能计算（E-HPC），您无需采购和管理服务器等基础设施，只需配置所需的计算资源和上传应用程序，就可以实现高性能和弹性的计算能力。本入门教程将引导您了解E-HPC的使用流程，涵盖从创建集群到提交作业的各个步骤，帮助您快速...
Lindorm文件引擎
org.apache.hadoop.hdfs.server.namenode.ha.ConfiguredFailoverProxyProvider","spark.hadoop.dfs.ha.namenodes.dfs.nameservices":"nn1,nn2","spark.hadoop.dfs.namenode.rpc-address.dfs.nameservices.nn1":"dfs.namenode.rpc-address....
在文件存储 HDFS 版上使用Presto
mv presto-server-0.265.1/plugin/hive-hadoop2/hadoop-apache2-2.7.4-9.jar presto-server-0.265.1/plugin/hive-hadoop2/hadoop-apache2-2.7.4-9.jar.bak 将编译后的hadoop-apache2-2.7.4-9.jar依赖包拷贝到对应目录下。cp presto-hadoop-...
使用救援连接服务器
使用场景 故障排查 当服务器的vCPU消耗较高或者因修改服务器SSH配置等原因，导致您无法使用Workbench和第三方远程连接工具（例如PuTTY、Xshell、SecureCRT等）连接服务器时，通过VNC连接服务器后排查问题。图形化桌面登录 Ubuntu等系统搭建...
弹性裸金属服务器规格
推荐规格族：通用型（ebmg）计算型（ebmc）内存型（ebmr）高主频型（ebmhf）GPU计算型（ebmgn）存储增强型弹性裸金属服务器实例规格族ebmg7se 通用型弹性裸金属服务器实例规格族ebmg7 通用型弹性裸金属服务器实例规格族ebmg7a 通用型弹性裸...
功能特性
轻量应用服务器 轻量应用服务器（Simple Application Server）是可以快速搭建且易于管理的轻量级云服务器，面向单台服务器提供了一键部署应用、一站式域名解析、安全管理以及运维监控等服务。轻量应用服务器操作简单便捷，能让您快速上手...
CheckHadoopDataSource-检查hadoop数据源配置
检查hadoop数据源配置。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中...
MapReduce开发手册
javac-classpath HADOOP_HOME/share/hadoop/common/hadoop-common-X.X.X.jar:HADOOP_HOME/share/hadoop/mapreduce/hadoop-mapreduce-client-core-X.X.X.jar:HADOOP_HOME/share/hadoop/common/lib/commons-cli-1.2.jar-d wordcount_classes ...
节省计划常见问题
当同时保有RDS Serverless实例和固定规格实例，由于Serverless实例的RCU费用是动态变化的，每小时费用不固定，超出通用型节省计划可抵扣金额的部分无法享受到优惠，此时可使用弹性型节省计划抵扣超出的RCU和存储空间费用。为什么RDS节省...
节省计划常见问题
当同时保有RDS Serverless实例和固定规格实例，由于Serverless实例的RCU费用是动态变化的，每小时费用不固定，超出通用型节省计划可抵扣金额的部分无法享受到优惠，此时可使用弹性型节省计划抵扣超出的RCU和存储空间费用。为什么RDS节省...
节省计划常见问题
当同时保有RDS Serverless实例和固定规格实例，由于Serverless实例的RCU费用是动态变化的，每小时费用不固定，超出通用型节省计划可抵扣金额的部分无法享受到优惠，此时可使用弹性型节省计划抵扣超出的RCU和存储空间费用。为什么RDS节省...
节省计划常见问题
当同时保有RDS Serverless实例和固定规格实例，由于Serverless实例的RCU费用是动态变化的，每小时费用不固定，超出通用型节省计划可抵扣金额的部分无法享受到优惠，此时可使用弹性型节省计划抵扣超出的RCU和存储空间费用。为什么RDS节省...
- 产品推荐
- 这些文档可能帮助您