访问文件存储HDFS版-阿里云

阿里云文档 2024-09-25

授权访问OSS-HDFS服务

本文介绍通过阿里云账号开通OSS-HDFS服务，如何授权RAM用户接入OSS-HDFS服务。

文章 2024-08-31 来自：开发者社区

当两个客户端尝试访问 HDFS 中的同一个文件时会发生什么？

Hadoop分布式文件系统（HDFS）是处理和存储大规模数据集的核心组件之一。在实际应用中，多个客户端同时访问HDFS中的同一个文件是一个常见的场景。了解这一过程中的细节对于确保数据一致性、系统性能和容错性至关重要。本文将详细探讨当两个客户端尝试同时访问HDFS中的同一个文件时会发生什么，并讨论相关的机制和考虑因素。一、HDFS的基本架构...

阿里云文档 2024-07-30

如何访问OSS-HDFS数据

Hologres从V1.3.26版本开始，支持读写存储于OSS-HDFS上的数据。本文为您介绍基于DLF访问OSS-HDFS数据湖数据的使用方法。

问答 2024-07-24 来自：开发者社区

如何创建一个PXF外部表来访问HDFS上的冷数据文件？

阿里云文档 2024-07-02

Spark读写OSS-HDFS数据源

AnalyticDB for MySQL湖仓版（3.0）Spark支持访问OSS-HDFS数据源，本文介绍如何使用Spark来操作OSS-HDFS数据。

问答 2024-05-29 来自：开发者社区

E-MapReduce如何限制陌生用户访问HDFS WEBUI

阿里云文档 2024-04-26

使用pyjindo访问阿里云OSS-HDFS

本文将以两种方式为您介绍如何在Python 3.6及更高版本中，利用Python的工具包pyjindo来操作OSS-HDFS。

问答 2023-11-08 来自：开发者社区

在Flink这个oss key 可以正常访问 hudi的 oss-hdfs，但这里就报错了，为什么？

文章 2023-10-10 来自：开发者社区

CDH/CDP中开启kerberos后如何访问HDFS/YARN/HIVESERVER2 等服务的webui

CDH/CDP中开启kerberos后如何访问HDFS/YARN/HIVESERVER2 等服务的webui在CDH/CDP等大数据平台中，当开启kerberos安全后，如何访问HDFS/YARN/HIVESERVER2 等服务的webui呢？一起看下相关知识。问题现象在CDH/CDP等大数据平台中，当开启kerberos安全后࿰...

文章 2023-08-07 来自：开发者社区

访问HDFS的常用接口,常用命令操作

HDFS常用命令接口常用命令功能-help [cmd]显示命令的帮助信息-ls(r)显示当前目录下所有文件-count[-q]显示目录中文件数量-du(s)显示目录中所有文件大小-mv移动多个文件到目标目录-cp复制多个文件到目标目录-rm(r)删除文件夹-put本地文件复制到hdfs-copyFromLocal同put-get [-ignoreCrc]复制文件到本地，可以忽略cr...