创建实例
通过创建StarRocks实例，您可以快速获取一个托管的且高性能的环境，无需自行搭建和维护基础设施，轻松进行大规模数据分析和查询。操作步骤 进入EMR Serverless StarRocks实例列表页面。登录 E-MapReduce控制台。在左侧导航栏，选择 EMR ...
使用DLF 2.0 Paimon Catalog
在 实例列表 页面，单击已创建实例操作列的 连接实例，详情请参见 通过EMR StarRocks Manager连接StarRocks实例。您可以选择使用admin或StarRocks超级管理员权限，以连接StarRocks实例。左侧菜单栏，选择 安全中心 用户管理，单后单击 添加...
查看组件部署信息
在E-MapReduce集群中，不同版本的集群实例节点上会部署不同的服务角色。例如，HDFS中的NameNode会被部署在Master节点上。本文将为您介绍如何查看E-MapReduce集群中各节点上服务组件的部署信息。操作步骤 进入集群服务页面。登录 E-...
存算分离存储包
EMR Serverless StarRocks存算分离版支持存算分离存储包计费模式，能够抵扣您在存算分离实例中使用数据存储时所产生的存储资源费用，但不包括缓存盘存储费用的抵扣。存算分离存储包是一种预付费计费方式，具有一定的价格优惠，您可以根据...
开源大数据平台 E-MapReduce
开源大数据平台E-MapReduce（Elastic MapReduce）是运行在阿里云平台上的一种大数据处理的系统解决方案。
通过EMR StarRocks Manager连接StarRocks实例
EMR StarRocks Manager是阿里云EMR团队为Serverless StarRocks实例提供的数据管理控制台。它为您提供了对实例内数据的全面管理、诊断与分析以及安全权限配置等功能。背景信息 SQL Editor是EMR StarRocks Manager提供的一个交互式查询编辑器...
管理工作流实例和节点实例
工作流创建后，您可以对已有的工作流实例和节点进行操作。本文为您介绍如何查看工作流实例、节点日志等。前提条件 已创建并运行工作流，详情请参见 管理工作流。查看工作流实例 进入任务编排页面。登录 E-MapReduce控制台。在左侧导航栏，...
Gateway实例说明
在阿里云E-MapReduce（简称EMR）体系中，Gateway实例扮演着至关重要的角色。它可以作为一个独立的作业提交点，关联到已有的集群。本文为您介绍如何在已有的EMR集群基础上创建Gateway集群和Gateway节点组。Gateway集群或Gateway节点组通常是...
登录集群
您可以通过SSH方式（SSH密钥对或SSH密码方式）或者直接连接ECS实例的方式登录到集群节点，对集群进行管理或者交互操作。前提条件 已在EMR on ECS创建集群，详情请参见 创建集群。确保本地服务器与集群Master节点网络连通。您可以在创建集群...
实现Hue多实例负载均衡
阿里云E-MapReduce默认在每个Master节点上部署一个Hue实例，当Hue访问压力过大时，其加载速度会变慢。本文介绍如何通过Gateway集群增加Hue实例数量，并通过阿里云负载均衡（Server Load Balancer）访问Hue，实现Hue多实例负载均衡。前提...
使用E-Mapreduce访问
hadoop distcp/apps hdfs:/${实例ID}/hadoop distcp/emr-flow hdfs:/${实例ID}/hadoop distcp/emr-sparksql-udf hdfs:/${实例ID}/hadoop distcp/hbase hdfs:/${实例ID}/hadoop distcp/spark-history hdfs:/${实例ID}/hadoop distcp/tmp ...
计费常见问题
本文汇总了E-MapReduce（简称EMR）计费的常见问题。E-MapReduce是否支持自动续费？如何查看EMR集群和所属的ECS实例的到期时间？EMR集群已到期但是集群的ECS实例未到期时，会产生计费吗？如何解决？EMR计费模式是否可以转换？我确认订单后未...
管理自动补偿
开启自动补偿功能后，当E-MapReduce（简称EMR）监测到您集群的ECS实例无法维持EMR上的引擎服务正常工作时，EMR的自动补偿功能会尝试为您新购ECS实例替换掉异常的ECS实例。前提条件 已创建数据湖（DataLake）、实时数据流（DataFlow）或...
创建阈值报警规则
云监控（CloudMonitor）是阿里云的一种监控告警服务，当您需要监控E-MapReduce资源的使用和运行情况时，可以通过创建阈值报警规则，实现监控项超过设定阈值后自动发送报警通知的功能，帮助您及时了解监控数据异常并快速进行处理。...
数据开发常见问题
在E-MapReduce数据开发的页面，找到对应的工作流实例，单击 运行记录。在 运行记录 区域，单击待查看工作流实例所在行的 详情，在 作业实例信息 页面查看执行集群ID。在日志保存目录 OSS:/mybucket/emr/spark 下，查找执行集群ID目录。在 ...
新功能发布记录
本文介绍阿里云E-MapReduce每次发布涉及的功能变更及对应的文档，帮助您了解E-MapReduce的发布动态。版本说明详情，请参见 发行版本。E-MapReduce的重要功能发布详情请参见 产品重大更新。2024年 2024年08月 功能名称 功能概述 发布时间 ...
快速入门
EMR on ECS EMR on ECS快速入门 E-MapReduce快速入门 EMR on ACK EMR on ACK快速入门 EMR Serverless StarRocks 快速使用存算一体版实例 快速使用存算分离版实例 快速使用EMR StarRocks Manager EMR Serverless Spark SQL开发快速入门 ...
备份与恢复（Beta）
EMR Serverless StarRocks支持将数据以快照文件的形式备份至阿里云OSS，或将备份的数据从阿里云OSS恢复至新的实例中。该功能不仅保障了数据的安全性和业务的连续性，还能帮助用户轻松创建包括数据和元数据在内的数据副本，以测试新功能、...
测试说明
登录阿里云，进入 E-MapReduce控制台 的EMR Serverless StarRocks页面，单击 创建实例。更多关于创建StarRocks实例的操作，请参见 创建实例。下载starrocks-benchmark测试工具包并解压 您需要登录步骤1中创建的ECS实例，在节点上执行如下...
E-MapReduce支持倚天云服务器
阿里云E-MapReduce（简称EMR）支持使用倚天云服务器构建开源大数据集群。与现有X86架构实例体验完全相同的情况下，具有更高的性价比，帮助您降低成本并提高效率。本文为您介绍倚天云服务器的特性、优势，以及在E-Mapreduce上倚天云服务器的...
SSB性能测试说明
登录阿里云，进入 E-MapReduce控制台 的EMR Serverless StarRocks页面，单击 创建实例。更多关于创建StarRocks实例的操作，请参见 创建实例。下载starrocks-benchmark测试工具包并解压 您需要登录步骤1中创建的ECS实例，在节点上执行如下...
查看物化视图
登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Serverless StarRocks。在顶部菜单栏处，根据实际情况选择地域。单击StarRocks Manager，或者单击已创建实例操作列的 连接实例。连接StarRocks实例详情，请参见 通过EMR StarRocks Manager...
功能特性
创建实例 扩缩容实例 升降配实例 实例升级 阿里云EMR Serverless StarRocks支持实例版本的升级，您可以便捷地将实例更新至最新版本，享受性能改进与功能增强。版本升级 实例配置 EMR Serverless支持通过控制台查询或修改StarRocks BE、FE等...
退款说明
本文介绍阿里云E-MapReduce的退款规则和退款方式。退款规则与方式 计费方式 退款规则 退款方式 包年包月 包年包月的集群在购买时已经根据购买时长预先支付了费用。在释放ECS实例时，系统将同时退还您EMR未使用部分的款项。说明 释放ECS实例...
Hadoop MapReduce作业配置
本文介绍如何配置Hadoop MapReduce类型的作业。前提条件 已创建好项目，详情请参见 项目管理。操作步骤 进入数据开发的项目列表页面。通过阿里云账号登录 阿里云E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击...
使用MapReduce处理JindoFS上的数据
本文介绍如何使用MapReduce读写JindoFS上的数据。JindoFS配置 以EMR-3.35版本为例，创建名为 emr-jfs 的命名空间，相关配置参数示例如下：jfs.namespaces=emr-jfs jfs.namespaces.emr-jfs.oss.uri=oss:/oss-bucket/oss-dir jfs.namespaces....
产品计费
本文介绍阿里云E-MapReduce的计费项、计费方式、转换计费方式、续费说明、欠费说明、查看消费明细、退费说明、查看账单和计费常见问题。相关项 描述 相关文档 计费项 为您介绍E-MapReduce的计费项，以及相关计算公式，以便您对支付的费用...
服务支持
本文档汇总了E-MapReduce的产品公告、发布记录、常见问题和服务等级协议等内容。产品公告 EMR on ECS：产品公告、安全公告 EMR Serverless StarRocks：产品公告 EMR Serverless Spark：产品公告 发布记录 EMR on ECS：新功能发布记录 EMR ...
续费说明
如果需要为集群中ECS实例和EMR实例设置不同的自动续费策略，则单击右上角的 自定义自动续费规则，在EMR实例和ECS实例区域的 配置自动续费规则 下拉列表中，分别选择续费的时长即可。单击 确定。自动续费开通后，后续系统会在资源到期前自动...
E-MapReduce Serverless Spark服务等级协议（SLA）
2024年7月20日起，E-MapReduce Serverless Spark服务等级协议（SLA）生效。详情请参见 E-MapReduce Serverless Spark服务等级协议。
管理工作流实例
工作流实例是工作流定义的实例化，可以通过手动启动或定时调度生成。当工作流被触发执行时，工作流定义就会实例化成为一个工作流实例。本文为您介绍工作流实例的相关操作。前提条件 已创建并运行工作流，详情请参见 创建工作流 和 运行工作...
为RAM用户授权
为确保RAM用户能正常使用E-MapReduce控制台功能，您需要使用阿里云账号登录访问控制RAM（Resource Access Management）控制台，授予RAM用户相应的权限。背景信息 访问控制RAM是阿里云提供的资源访问控制服务，详情请参见 什么是访问控制。...
E-MapReduce服务等级协议（SLA）
本服务等级协议（Service Level Agreement，简称“SLA”）规定了阿里云向客户提供的E-MapReduce（简称“EMR”）的服务可用性等级指标及赔偿方案。服务等级协议详情请参见 E-MapReduce服务等级协议。
E-MapReduce Workflow服务等级协议（SLA）
E-MapReduce Workflow服务等级协议（SLA）的详情，请参见 E-MapReduce Workflow服务等级协议。
支持倚天云服务器
阿里云E-MapReduce支持使用倚天云服务器构建开源大数据集群。适用客户 全网用户 新增功能/规格 阿里云E-MapReduce（简称EMR）支持使用倚天云服务器构建开源大数据集群。与现有X86架构实例体验完全相同的情况下，具有更高的性价比，帮助用户...
E-MapReduce合规性
截至目前，阿里云E-MapReduce已通过多项资质认证，能够满足您的多种合规要求。合规资质 说明 ISO27018 ISO27018建立了一套关于个人隐私保护的规范，涵盖了控制目标、控制内容及相应的实施指引。该标准依据ISO/IEC 27002识别的信息安全风险...
访问模式
访问E-MapReduce（简称EMR）上的ClickHouse集群支持通过原生JDBC访问和通过负载均衡SLB访问两种方式。本文为您介绍如何通过这两种方式访问ClickHouse集群。背景信息 通过原生JDBC访问ClickHouse集群的架构图如下。通过负载均衡器SLB访问...
E-MapReduce Serverless StarRocks服务等级协议（SLA...
2023年6月1日起，E-MapReduce Serverless StarRocks服务等级协议（SLA）生效。详情请参见 开源大数据平台E-MapReduce Serverless服务等级协议。
管理权限
在使用阿里云E-MapReduce服务时，为了避免数据泄露、误操作等安全风险，有必要对项目内成员的权限进行合理的管控。本文将为您介绍E-MapReduce服务的权限管理体系。权限体系 类别 说明 权限主体 E-MapReduce支持的权限主体如下：用户：包含...
E-MapReduce自定义权限策略参考
操作文档 创建自定义权限策略 修改自定义权限策略内容和备注 删除自定义权限策略 管理权限策略引用记录 管理自定义权限策略版本 授权信息参考 使用自定义权限策略，您需要了解业务的权限管控需求，并了解E-MapReduce授权信息。详细内容请...
- 产品推荐
- 这些文档可能帮助您