mapreduce免费实例-mapreduce免费实例文档介绍内容-阿里云

管理告警组和告警实例

为了使用告警功能，您需要先创建相应的告警实例，并将其添加到所选的告警组中。创建告警实例进入安全中心页面。使用阿里云账号（主账号）或RAM用户登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Workbench Workflow。在Workflow页面，...

通过客户端方式连接StarRocks实例

本文为您介绍如何使用客户端方式连接Serverless StarRocks实例。前提条件已创建Serverless StarRocks实例，详情请参见创建实例。使用SQL Editor连接StarRocks 进入StarRocks Manager页面。登录 E-MapReduce控制台。在左侧导航栏，选择 ...

hadoop jar HADOOP_HOME/share/hadoop/mapreduce/hadoop-mapreduce-examples-x.x.x.jar wordcount \-Dalluxio.user.file.writetype.default=CACHE_THROUGH \-libjars/PATH_TO_ALLUXIO/client/alluxio-x.x.x.-client.jar \ path1 path2 说明...

开源大数据平台E-MapReduce系统权限策略参考

本文描述开源大数据平台 E-MapReduce支持的所有系统权限策略及其对应的权限描述，供您授权RAM身份时参考。什么是系统权限策略权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问...

常见问题

本文介绍E-MapReduce Druid使用过程中遇到的一些常见问题以及解决方法。索引失败问题分析思路当发现索引失败时，一般遵循如下排错思路：对于批量索引如果curl直接返回错误，或者不返回，检查一下输入文件格式。或者curl加上-v 参数，观察...

OSS参考使用说明

本文介绍在E-MapReduce作业配置中使用的OSS URI。OSS URI 使用E-MapReduce时，通常会使用两种OSS URI：native URI：oss:/bucket[.endpoint]/object/path。您在作业中指定输入输出数据源时使用此URI，等同于 hdfs:/。您操作OSS数据时，可以...

使用OpenAPI

本文为您介绍使用开源大数据平台E-MapReduce OpenAPI的基本信息。关于使用阿里云OpenAPI的详细介绍，请参见使用OpenAPI。基本信息版本说明 E-MapReduce 版本号说明 2021-03-20 推荐使用。EMR Workbench 版本号说明 2024-04-30 推荐使用...

SDK下载

阿里云E-MapReduce SDK包含阿里云Java SDK公共部分和E-MapReduce部分，公共部分依赖 aliyun-java-sdk-core，E-MapReduce部分依赖 aliyun-java-sdk-emr。我们推荐您采用Maven的方式来管理您的工程。Maven依赖 dependency groupId ...

开源大数据平台 E-MapReduce系统权限策略参考

本文描述开源大数据平台E-MapReduce支持的所有系统权限策略及其对应的权限描述，供您授权RAM身份时参考。什么是系统权限策略权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问...

开发参考

本文介绍了E-MapReduce的SDK和API相关的内容，供您进行对应的开发操作。EMR on ECS API概览 SDK概述 EMR Serverless Spark API概览 SDK参考

服务角色

EMR on ECS服务角色允许E-MapReduce服务在配置资源或执行服务级别操作时调用其他阿里云服务。例如，服务角色用于在EMR集群启动时创建ECS实例。本文为您介绍EMR服务角色及其权限策略。EMR on ECS会使用到AliyunEMRDefaultRole、...

示例项目使用说明

MapReduce WordCount：单词统计 Hive sample.hive：表的简单查询 Pig sample.pig：Pig处理OSS数据实例 Spark SparkPi：计算Pi SparkWordCount：单词统计 LinearRegression：线性回归 OSSSample：OSS使用示例 MaxComputeSample：MaxCompute...

阿里云账号角色授权

阿里云E-MapReduce服务（EMR on ECS）在运行时需要具备访问其他阿里云资源及执行相关操作的权限。本文将为您介绍首次使用E-MapReduce服务时，阿里云账号需同意系统自动创建E-MapReduce服务所需的默认角色。背景信息阿里云E-MapReduce为...

MapReduce开发手册

本文以EMR-3.27.0集群为例，通过以下示例为您介绍如何在E-MapReduce集群中开发MR作业。在MapReduce中使用OSS 在MapReduce中读写OSS，需要配置如下参数。说明请确保在代码运行环境设置了环境变量ALIBABA_CLOUD_ACCESS_KEY_ID和ALIBABA_...

SQL开发

登录 E-MapReduce控制台。在左侧导航栏，选择 EMR Serverless Spark。在 Spark 页面，单击目标工作空间名称。在 EMR Serverless Spark 页面，单击左侧导航栏中的数据开发。新建任务。在开发目录页签下，单击新建。在弹出的对话框中，...

概述

创建Kafka集群如果需要新建包含Kafka的集群，请登录E-MapReduce新版控制台创建DataFlow类型集群，创建集群详情请参见创建DataFlow Kafka集群。本地盘Kafka集群当在本地盘上部署Kafka服务时，您需要在E-MapReduce控制台的配置页面，...

扩容磁盘

当E-MapReduce集群的数据存储空间不足时，您可以根据本文进行磁盘（数据盘和系统盘）扩容。本文为您介绍如何对磁盘进行扩容。背景信息根据E-MapReduce版本和磁盘属性不同，E-MapReduce支持的磁盘扩容方式也不同，具体说明如下：数据盘：...

回滚配置

E-MapReduce支持在控制台对各服务参数新增、修改、删除配置项等操作进行配置回滚。本文为您介绍如何通过E-MapReduce控制台回滚各服务的参数配置。前提条件已对服务配置进行实际的操作变更。操作步骤进入集群服务页面。登录 E-MapReduce...

CostOptimizedConfig

80 OnDemandPercentageAboveBaseCapacity integer 节点组满足最小按量实例 OnDemandBaseCapacity 要求后，超出的实例中按量实例应占的比例，取值范围：0～100。80 SpotInstancePools integer 指定可用实例规格的个数，伸缩组将按成本最低的...

开源大数据平台 E-MapReduce系统权限策略参考

本文描述开源大数据平台 E-MapReduce支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问...