阿里云文档 2024-04-18

配置Hadoop集群的弹性伸缩

当您的业务量需求不断波动时,建议您开启弹性伸缩功能并配置相应的伸缩规则,以便于E-MapReduce(简称EMR)可以按业务量波动增加或减少Task节点。确保作业完成的同时,可以节省成本。本文为您介绍如何在EMR控制台配置弹性伸缩。

文章 2024-02-07 来自:开发者社区

Hadoop快速入门——第一章、认识Hadoop与创建伪分布式模式(Hadoop3.1.3版本配置)

操作位置 声明,为方便操作,所有内容都在【/opt】文件夹下。 cd /opt 上传压缩包 ...

Hadoop快速入门——第一章、认识Hadoop与创建伪分布式模式(Hadoop3.1.3版本配置)
阿里云文档 2023-09-13

如何配置数据湖构建作为EMR上Hadoop集群的元数据_EMR on ECS_开源大数据平台 E-MapReduce(EMR)

本文为您简单介绍阿里云数据湖构建,以及如何切换E-MapReduce(简称EMR)的元数据存储类型。

文章 2022-11-07 来自:开发者社区

Hadoop快速入门——第二章、分布式集群(第一节、网络与ssh登录配置)(2)

修改计算机名称(正式配置)vi /etc/hostname主机: 子机:(a1/a2自己改名字就行)2、配置主机名查询静态表配置【master】主机的【hosts】,静态表。vi /etc/hosts 192.168.52.131 master 192.168.52.132 a1 192.168.52.133 a2远程拷贝静态表到【a1与a2】两个子机,需要输入【yes】与【password】.....

Hadoop快速入门——第二章、分布式集群(第一节、网络与ssh登录配置)(2)
文章 2022-11-07 来自:开发者社区

Hadoop快速入门——第二章、分布式集群(第一节、网络与ssh登录配置)(1)

配置静态IP地址和修改主机名(网络配置使用随机分配免配置)vi /etc/sysconfig/network-scripts/ifcfg-ens33需要注意修改时:1. BOOTPROTO=static 2. ONBOOT=yesBOOTPROTO=static # 将 dhcp 换成 staticONBOOT=yes # 将 no 换成 yes追加配置:IPADDR=192.168.200.1....

Hadoop快速入门——第二章、分布式集群(第一节、网络与ssh登录配置)(1)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

大数据

大数据计算实践乐园,近距离学习前沿技术

+关注