管理共享存储
登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>共享存储。在页面上方选择目标集群，然后单击 资源管理 页签。在 资源管理 页签下，单击 挂载存储资源。在弹出面板，完成参数配置，然后单击 ...
客户端功能概述
作业操作员 负责提交作业到E-HPC集群进行高性能计算。E-HPC客户端主要面向作业操作员，支持作业提交、作业文件管理等功能。具体功能如下：功能模块 说明 作业查询 支持按多种条件查询作业数据，以便调整作业任务。作业提交 支持通过界面、...
软件概述
E-HPC提供了业界主流的科学计算应用、编译器运行时...无 运行时库 MPI通信库 GPU加速库 Intel高性能库 Intel-MPI OpenMPI MPICH MVAPICH CUDA-Toolkit cuDNN Intel-ICC-RUNTIME Intel-IFORT-RUNTIME Intel-MKL Intel-DAAL Intel-IPPIntel-TBB
API概览
本产品（弹性高性能计算/2018-04-12）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
应用场景
无影云电脑 可广泛应用于具有高数据安全管控、高性能计算等要求的金融、设计、视频、教育等领域，适用于多种办公场景，如远程办公、多分支机构、安全OA、短期使用、专业制图等。远程办公场景 可以随时随地，通过客户端连接云电脑进行办公，...
通过RAM用户分权管理集群
修改RAM用户的控制台权限 默认情况下，RAM用户具有弹性高性能计算控制台的所有页面的访问权限，控制台左侧导航栏将显示全部功能菜单项。修改RAM用户的控制台权限功能可以控制RAM用户访问弹性高性能计算控制台时，左侧导航栏的菜单项显示。...
管理用户
创建用户 打开弹性高性能计算控制台的 用户 页面。登录 弹性高性能计算控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 资源管理>用户。在 用户 页面，从 集群 列表中选择目标集群，然后单击 新增用户。在 新增用户 页面，...
授权信息
本文为您介绍 弹性高性能计算（Ehpc）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。弹性高性能计算（Ehpc）的RAM代码（RamCode）为 ehpc，支持的授权粒度为 OPERATION。权限策略通用结构 权限策略支持JSON...
高性能版Spark全密态计算引擎使用示例
AnalyticDB MySQL 湖仓版（3.0）高性能版的Spark全密态计算引擎，在基础版Spark全密态引擎能力的基础上，支持Parquet模块化加密功能，且兼容社区版Spark、Hadoop、Hive等计算引擎，在保证数据传输与存储过程安全的同时，提升了数据处理效率...
什么是实时数仓Hologres
在线高性能主键点查 基于行存表的主键索引和查询引擎的短路径优化，Hologres支持每秒数十万QPS高性能在线点查、前缀扫描，支持高吞吐实时更新，相比开源系统性能提升10倍以上，可用于实时加工链路的维表关联、ID-Mapping等场景。...
ZooKeeper的使用场景和MSE ZooKeeper的优势
基于Dragonwell进行构建，读取性能提升：MSE ZooKeeper集成阿里高性能JDK，开启协程优化能力，并对ZooKeeper的读写任务队列做出锁粒度的优化，在高并发处理的场景下，读取性能相比开源能够提升1倍左右。参数性能调优，降低GC时间：...
快速入门
文件存储 HDFS 版 兼容了标准的HadoopFS协议接口，使您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、高可靠和高可用的分布式文件系统。相比自建HDFS存储，使用 文件存储 HDFS 版 服务可以大量节约...
文件存储HDFS版
您无需对现有大数据分析应用做任何修改，即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布式文件系统。适用场景 文件存储HDFS版 适用于对吞吐要求较高的大数据分析与机器学习业务场景。文件存储HDFS版...
授权信息
本文为您介绍 弹性高性能计算（Ehpc）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。弹性高性能计算（Ehpc）的RAM代码（RamCode）为 ehpc，支持的授权粒度为 OPERATION。权限策略通用结构 权限策略支持JSON...
Impala概述
Impala为存储在Apache Hadoop中的数据，提供了高性能和低延迟的SQL查询。使用Impala，您可以通过SELECT、JOIN和聚合函数实时查询存储在HDFS或HBase中的数据。背景信息 Impala使用与Apache Hive相同的元数据、SQL语法（Hive SQL）和ODBC驱动...
应用场景
云服务器ECS具有广泛的应用场景，既可以...推荐使用 弹性高性能计算E-HPC，弹性高性能计算可以将计算能力积聚，用并行计算方式解决更大规模的科学、工程和商业问题。更多案例 更多关于云服务器ECS的应用场景，请参见 云服务器ECS客户案例。
配置Lindorm Spark节点
背景信息 Lindorm计算引擎是一款基于云原生多模数据库Lindorm核心能力实现的数据库内高性能、低成本、稳定可靠的分布式计算服务。关于Lindorm计算引擎的更多信息，请参见 引擎简介。费用说明 Lindorm实例的计算引擎按照计算资源实际使用量...
使用Hadoop作为元仓计算引擎进行元仓初始化
各方式获取元数据优劣势对比详情如下：元数据获取方式 优势与劣势 直连元数据库 高性能：直接连接底层的元数据库，省去了中间的HMS服务环节，客户端在获取meta（元数据）时性能更好，同时能够减少网络传输上的耗时。更开放：通过HMS服务...
概述
同一份数据以不同的格式保存，数据所占用的...数据采用高性能的列存储格式，提升数据查询性能。支持嵌套的数据模型。自带性能友好的统计元信息。减少53.3%560MB ORC Hadoop生态格式的数据。自带性能友好的统计元信息。高压缩比 减少80.4%235MB
JindoFS介绍和使用
这些接口包括但不限于Rename的原子性和事务性能力、高性能本地写入、透明压缩、truncate、append、flush、sync和snapshot等。这些高阶存储接口对实现完整的POSIX和对接更多的大数据引擎到OSS是不可或缺的，例如，Flink、HBase、Kafka和Kudu...
产品优势
仅支持宽列 全局二级索引 内置，查询透明、高性能、按需冗余非索引列，请参见 二级索引。依赖外部组件，复杂。全文检索 智能集成搜索引擎Solr，提供面向海量数据的存储、多维查询、全文索引等统一访问的混合型能力，请参见 全文索引服务。...
E-HPC普通服务角色
通过AliyunECSInstanceForEHPCRole，ECS实例可以获得云服务器ECS、弹性高性能计算E-HPC的访问权限。RAM用户使用普通服务角色需要的权限 如果使用RAM用户创建或删除普通服务角色，必须使用阿里云账号为该RAM用户授权。方式一：授予...
功能特性
文件存储 HDFS 版 具有无缝集成、共享访问、安全控制、线性扩展等多种特性。无缝集成 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统（HDFS）中一样管理...同时，其性能与容量呈线性关系，可满足业务增长时对更高容量与存储性能的需求。
Serverless Spark概述
ECI跟ECS类似，都具备规格，DLA平台对具体的ECI规格进行了屏蔽、简化，用户只需要配置small、medium、large这样的简单配置即可，平台在调度的时候会优先使用高性能计算资源。资源规格 计算资源 消耗的CU数 c.small 1Core 2GB 0.8CU small 1...
实例规格族
推荐 高性能计算优化型实例规格族hpc8ae 高性能计算优化型实例规格族hpc7ip 高性能计算优化型实例规格族hpc6id 通用型超级计算集群实例规格族sccg7 计算型超级计算集群实例规格族sccc7 高主频计算型超级计算集群实例规格族scchfc6 高主频...
什么是EMR on ECS
对比项 阿里云EMR 自建Hadoop集群 成本 支持按量和包年包月付费方式，集群资源支持灵活调整，数据分层存储，资源使用率高。无额外软件License费用。需提前预估资源，且资源相对固定，资源使用率低。采用Hadoop发行版，需额外支付License...
SmartData常见问题
Jindo DistCp比Hadoop DistCp性能高，且支持OSS归档。JindoFS在新版本才有，如果需要在EMR集群上使用JindoFS，该如何处理？如果集群规模不大，建议重建集群来使用JindoFS和EMR新版本。JindoFS支持哪些Hadoop版本和发行厂商？JindoFS SDK...
MaxCompute如何访问Hologres
Hologres具备高并发地实时写入和查询数据的能力，同时支持数据无需迁移就能高性能加速分析MaxCompute数据，通过联邦分析Hologres实时数据与MaxCompute离线数据，实现离线实时一体化的数据仓库产品解决方案。您可以使用MaxCompute和Hologres...
客户案例
客户需求 集群水位高，性能差，亟待大数据综合治理。IDC大数据每年投入成本高，希望降本提效。价值体现 从大数据平台上云整体“降本增效”的方案快速切入，迁移到大数据MaxCompute、实时计算、DataWorks后，部分任务有10倍以上的性能提升，...
Jindo DistCp场景化使用指导
如果要Copy的所有文件中小文件的占比较高，大文件较少，但是单个文件数据较大，在正常流程中是按照随机方式来进行Copy文件分配，此时如果不做优化很可能造成一个Copy进程分配到大文件的同时也分配到很多小文件，不能发挥最好的性能。...
Jindo DistCp场景化使用指导
如果要Copy的所有文件中小文件的占比较高，大文件较少，但是单个文件数据较大，在正常流程中是按照随机方式来进行Copy文件分配，此时如果不做优化很可能造成一个Copy进程分配到大文件的同时也分配到很多小文件，不能发挥最好的性能。...
Jindo DistCp场景化使用指导
如果要Copy的所有文件中小文件的占比较高，大文件较少，但是单个文件数据较大，在正常流程中是按照随机方式来进行Copy文件分配，此时如果不做优化很可能造成一个Copy进程分配到大文件的同时也分配到很多小文件，不能发挥最好的性能。...
Jindo DistCp场景化使用指导
如果要Copy的所有文件中小文件的占比较高，大文件较少，但是单个文件数据较大，在正常流程中是按照随机方式来进行Copy文件分配，此时如果不做优化很可能造成一个Copy进程分配到大文件的同时也分配到很多小文件，不能发挥最好的性能。...
大数据型
同时，结合以Hadoop为代表的分布式计算业务的高可用架构，大数据型实例采用本地存储的设计，保证海量存储空间、高存储性能。大数据实例具有以下特点：基于企业级架构提供稳定计算能力，为高效处理计算作业提供保障。网络性能更高（包括单...
产品概述
StarRocks作为一款兼容MySQL协议的OLAP分析引擎，提供了极致的性能和丰富的OLAP场景模型，包括OLAP多维分析、数据湖分析、高并发查询以及实时数据分析。关于EMR Serverless的更多介绍，请参见 什么是EMR Serverless StarRocks。产品架构 ...
产品简介
StarRocks作为一款兼容MySQL协议的OLAP分析引擎，提供了极致的性能和丰富的OLAP场景模型，包括OLAP多维分析、数据湖分析、高并发查询以及实时数据分析。关于EMR Serverless的更多介绍，请参见 什么是EMR Serverless StarRocks。产品架构 ...
EMR-3.38.x版本说明
Presto 修复了Hadoop高可用集群，Presto需要配置host才能查询Hive表的问题。修复了内存较小时，默认配置下Presto无法启动的问题。修复了修改 worker-jvm 配置无法生效的问题。支持Ranger。Impala 修复了查询DLF元数据表时，提示 no such ...
YARN调度器
yarn.scheduler.capacity.schedule-asynchronously.maximum-threads 不配置 异步调度：最大分配线程数，默认值：1，多个分配线程可能产生大量重复Proposal，通常1个分配线程已经具备了很高的调度性能，因此建议不配置。yarn.scheduler....
Jindo DistCp场景化使用指导
如果要Copy的所有文件中小文件的占比较高，大文件较少，但是单个文件数据较大，在正常流程中是按照随机方式来进行Copy文件分配，此时如果不做优化很可能造成一个Copy进程分配到大文件的同时也分配到很多小文件，不能发挥最好的性能。...
Jindo DistCp场景化使用指导
如果要Copy的所有文件中小文件的占比较高，大文件较少，但是单个文件数据较大，在正常流程中是按照随机方式来进行Copy文件分配，此时如果不做优化很可能造成一个Copy进程分配到大文件的同时也分配到很多小文件，不能发挥最好的性能。...
- 产品推荐
- 这些文档可能帮助您