阿里云文档 2025-09-16

无需解冻直接实时读取OSS-HDFS服务归档文件

归档直读是指直接访问OSS-HDFS服务中归档存储类型的文件,而无需先对其解冻。归档直读适用于实时读取极少需要访问的数据场景。

阿里云文档 2025-07-10

使用Check节点检查数据源或实时同步任务是否可用

DataWorks的Check节点可用于检查目标对象(MaxCompute分区表、FTP文件、OSS文件、HDFS文件、OSS_HDFS文件以及实时同步任务)是否可用,当Check节点满足检查策略后会返回运行成功状态。如果某任务的运行依赖目标对象,您可使用Check节点检查目标对象,并设置该任务为Check节点的下游任务,当Check节点满足检查策略后,便会运行成功并触发下游任务执行。本文为您介绍...

阿里云文档 2024-08-06

访问权限的概念、使用方式及其相关注意事项

文件存储 HDFS 版为目录和文件提供了一种访问权限,该访问权限类似于POSIX文件系统的权限模型。本文简要介绍访问权限的概念、使用方式及其相关注意事项。

阿里云文档 2024-05-13

写入HDFS出现无法close文件的解决方案

本文介绍写入HDFS出现无法close文件的异常的解决方案。

阿里云文档 2023-09-13

如何进行文件内容校验_EMR on ECS_开源大数据平台 E-MapReduce(EMR)

通过JindoDistCp从HDFS迁移到OSS-HDFS的文件,可以进行文件内容检验。本文为您介绍文件内容校验的操作步骤。

文章 2021-12-19 来自:开发者社区

HDFS 海量文件归档到 OSS | 学习笔记

开发者学堂课程【数据湖 JindoFS + OSS 实操干货36讲:HDFS 海量文件归档到 OSS】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/833/detail/13963HDFS 海量文件归档到 OSS内容介绍一、背景二、功能介绍三、演示 一、背景HDFS 数据迁移●用户需要将....

HDFS 海量文件归档到 OSS | 学习笔记
文章 2021-12-19 来自:开发者社区

高效迁移 HDFS 海量文件到 OSS | 学习笔记

开发者学堂课程【数据湖 JindoFS + OSS 实操干货36讲:高效迁移 HDFS 海量文件到 OSS】学习笔记,与课程紧密联系,让用户快速学习知识。课程地址:https://developer.aliyun.com/learning/course/833/detail/13961高效迁移 HDFS 海量文件到 OSS 内容介绍一、DistCp 介绍二、Jindo DistCp 介....

高效迁移 HDFS 海量文件到 OSS | 学习笔记
文章 2021-05-19 来自:开发者社区

数据湖实操讲解【数据迁移】第三讲:如何将 HDFS 海量文件归档到OSS

本期导读 :【数据迁移】第三讲主题:如何将 HDFS 海量文件归档到 OSS讲师:辰石,阿里巴巴计算平台事业部 EMR 技术专家内容框架:背景介绍具体功能详解使用实例直播回放链接:(3/4讲)https://developer.aliyun.com/live/246750背景简述HDFS 数据迁移用户需要将数据存储在 IDC 机房的 HDFS 的集群内。HDFS 的集群的空间依赖本地磁盘空间,.....

数据湖实操讲解【数据迁移】第三讲:如何将 HDFS 海量文件归档到OSS
文章 2021-05-12 来自:开发者社区

数据湖实操讲解【数据迁移】第一讲:高效迁移 HDFS 海量文件到 OSS

本期导读 :【数据迁移】第一讲主题:高效迁移 HDFS 海量文件到 OSS讲师:扬礼,阿里巴巴计算平台事业部 EMR 开发工程师主要内容:DistCp 介绍Jindo DistCp 介绍性能优化功能演示直播回放链接:https://developer.aliyun.com/live/246728背景介绍为了让更多开发者了解并使用 JindoFS+OSS,由阿里云JindoFS+OSS 团队打造.....

数据湖实操讲解【数据迁移】第一讲:高效迁移 HDFS 海量文件到 OSS

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

云存储

阿里云存储基于飞天盘古2.0分布式存储系统,产品多种多样,充分满足用户数据存储和迁移上云需求。

+关注