阿里云文档 2024-05-30

使用OSS-HDFS服务回收站在指定时间内恢复删除的数据

使用OSS-HDFS回收站时,需要客户端将待删除文件挪至指定目录,并由服务端定时清理该目录下的数据。

阿里云文档 2024-04-25

通过SeaTunnel集成平台将数据写入OSS-HDFS服务_对象存储(OSS)

SeaTunnel是一个开源、易用的超高性能分布式数据集成平台,支持海量数据的实时同步。本文介绍如何通过SeaTunnel集成平台将数据写入OSS-HDFS服务。

Hadoop 分布式文件系统 HDFS

43 课时 |
1096 人已学 |
免费
开发者课程背景图
阿里云文档 2024-03-27

AnalyticDB PostgreSQL读写HDFS、Hive或MySQL外部数据_云原生数据仓库 AnalyticDB PostgreSQL版(AnalyticDB for PostgreSQL)

若您需要通过AnalyticDB PostgreSQL版访问外部异构数据源(HDFS、Hive和JDBC)时,可以使用异构数据源访问功能将外部数据转换为AnalyticDB PostgreSQL版数据库优化后的格式进行查询和分析。

阿里云文档 2024-01-23

查询高可用集群中的HDFS数据

如果您所使用的数据集群开启了高可用,那么在查询高可用集群中的HDFS数据时,您需要进行额外的配置。建议您按照本文的操作步骤来配置StarRocks集群,以实现HDFS的高可用性。

文章 2024-01-18 来自:开发者社区

HDFS的数据读取流程是怎样的?请描述数据读取的过程。

HDFS的数据读取流程是怎样的?请描述数据读取的过程。HDFS(Hadoop Distributed File System)是一种用于存储和处理大规模数据的分布式文件系统。在HDFS中,数据读取的流程如下:客户端发起读取请求:当应用程序需要读取HDFS中的数据时,客户端会向HDFS的主节点(NameNode)发送读取请求。读取请求包含要读取的文件路径和偏移量等信息。主节点处理读取请求:主节点接....

文章 2024-01-18 来自:开发者社区

HDFS的数据写入流程是怎样的?请描述数据写入的过程。

HDFS的数据写入流程是怎样的?请描述数据写入的过程。HDFS的数据写入流程可以分为以下几个步骤:客户端与NameNode通信:客户端首先与HDFS的NameNode进行通信,向其发送写入请求。NameNode是HDFS的主节点,负责管理文件系统的命名空间和元数据信息。文件切分:客户端将待写入的文件切分成固定大小的数据块(通常为128MB)。每个数据块都会被分配一个唯一的块标识符。数据块副本选择....

阿里云文档 2023-08-15

如何提高访问OSS或OSS-HDFS数据时HTTP请求的响应速度

本文为您介绍如何提高访问OSS或OSS-HDFS数据时HTTP请求的响应速度,以便优化OSS或OSS-HDFS上的数据处理。

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。