阿里云文档 2025-03-21

使用Hadoop命令操作OSS/OSS-HDFS

在使用阿里云EMR Serverless Spark的Notebook时,您可以通过Hadoop命令直接访问OSS或OSS-HDFS数据源。本文将详细介绍如何通过Hadoop命令操作OSS/OSS-HDFS。

阿里云文档 2025-03-14

2025-03-03版本说明

本文为您介绍2025年03月03日发布的EMR Serverless Spark的功能变更。

阿里云文档 2025-03-11

阿里云StarRocks业务使用最佳实践

本文旨在为您介绍StarRocks的基础使用方法和常见操作,适用于首次接触StarRocks的用户。

阿里云文档 2025-03-10

通过Java代码连接启用了Kerberos认证的EMR Hive

在企业级大数据平台中,Kerberos认证是保障Hadoop、Hive、HBase等组件安全性的关键机制。当本地Java客户端需要连接到启用了Kerberos认证的EMR集群时,必须正确配置Kerberos,并利用Hive JDBC驱动进行连接。本文将介绍在macOS/Linux环境中,通过Java代码连接到启用了Kerberos认证的EMR Hive服务的方法。

阿里云文档 2025-03-10

容灾管理(Beta)

容灾管理功能主要为存算分离的实例提供多可用区(AZ)部署能力,确保在某个可用区出现不可用情况时仍能保障数据的正常访问。多可用区部署时,数据底层采用同城冗余存储,以提供更高的可靠性。本文将主要介绍容灾管理的基本使用方法。

文章 2024-10-14 来自:开发者社区

大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(已更完) ...

大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比
问答 2024-06-26 来自:开发者社区

大数据计算MaxCompute是可以用hdfs和hive和mapreduce的吗?

我有个基于cdh5.9的项目要接入云,公司买的阿里云大数据服务没有emr,大数据计算MaxCompute是可以用hdfs和hive和mapreduce的吗?

问答 2024-06-14 来自:开发者社区

通过ECS自建的大数据平台迁移到E-MapReduce是否需要停机

通过ECS自建的大数据平台迁移到E-MapReduce是否需要停机

文章 2024-06-12 来自:开发者社区

【大数据】MapReduce JAVA API编程实践及适用场景介绍

1.前言 本文是作者大数据系列专栏的其中一篇,前文我们依次聊了大数据的概论、分布式文件系统、分布式数据库、以及计算引擎mapreduce核心概念以及工作原理。 书接上文,本文将会继续聊一下mapreduce的编程实践以及mapreduce的适用场景。基于的Hadoop版本依然是前文的hadoop3.1.3。 2.mapreduce编程示例 本文依然以最经典的单词分...

【大数据】MapReduce JAVA API编程实践及适用场景介绍
文章 2024-06-12 来自:开发者社区

【大数据】计算引擎MapReduce

1.概述 1.1.前言 本文是作者大数据系列专栏的其中一篇 本文将会聊一下计算引擎MapRedduce,深入浅出快速过一遍MapReduce的核心概念和原理,不涉及具体操作,具体操作将会在下文聊。 1.2.大数据要怎么计算? 大数据集的数据是海量的,动辄几十上百TB,为了能将其存下来都是采用的分布式存储,将整个数据集分散到多个节点上去。要对其做统计之类的...

【大数据】计算引擎MapReduce

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐