阿里云文档 2025-07-07

使用自建Hadoop访问OSS-HDFS

OSS-HDFS服务是一款云原生数据湖存储产品。基于统一的元数据管理能力,在完全兼容HDFS文件系统接口的同时,提供充分的POSIX能力支持,能更好地满足大数据和AI等领域的数据湖计算场景。本文介绍Hadoop如何通过JindoSDK访问OSS-HDFS服务。

阿里云文档 2024-08-12

通过Hadoop Shell以命令行的方式访问OSS-HDFS服务

如果您希望通过命令行的方式在开通OSS-HDFS服务的Bucket中执行上传、下载、删除等相关操作,您可以使用Hadoop Shell的方式。

文章 2022-04-23 来自:开发者社区

Hadoop服务快速部署(下)

从日志中可以看到这些关键信息客户端连接ResourceManager资源管理器 对应端口是8032 client.RMProxy: Connecting to ResourceManager at /0.0.0.0:8032 提交一个mapreduce任务到 8088端口 mapreduce.Job: The url to track the job: http://529923fd985e:8....

Hadoop服务快速部署(下)
文章 2022-04-23 来自:开发者社区

Hadoop服务快速部署(上)

这篇文章记录下针对不同的hadoop版本进行服务部署的过程,希望可以帮到你们安装docker hadoop2.7.0一键部署docker hadoop3.0.0集群(一个master 三个slave)安装docker hadoop 3.2.0a、docker启动b、docker compose方式启动安装hadoop 2.7.0版本安装命令docker run --name hdfs2.7.3 ....

Hadoop服务快速部署(上)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

大数据

大数据计算实践乐园,近距离学习前沿技术

+关注