阿里云文档 2025-11-05

调用GetFile API获取文件详情-大数据开发治理平台 DataWorks-阿里云

该接口用于获取文件的详情。

阿里云文档 2025-11-03

使用DistCp任务实现大规模文件迁移

当您需要大文件或多文件的纯文件复制时,可以使用DataWorks创建DistCp任务,该方式能够极大的提高同步传输的效率,实现跨文件系统、大规模数据迁移和同步需求。

阿里云文档 2025-09-19

Serverless Spark支持通过自动或手动解冻OSS归档文件,确保SQL作业连续执行,需版本esr-4.4.0及以上。

当Spark作业需读取OSS归档存储中的数据时,因文件处于冻结状态无法直接访问,导致任务失败。本功能支持自动或手动触发解冻流程,确保作业正常执行,提升冷数据处理效率。

文章 2024-04-29 来自:开发者社区

MaxCompute操作报错合集之spark3.1.1通过resource目录下的conf文件配置,报错如何解决

问题一:大数据计算MaxCompute查询max-compute的表数据报这个错是怎么回事啊? 大数据计算MaxCompute我用Yarn-cluster模式查询max-compute的表数据报这个错是怎么回事啊?文档搜不到报错原因 ...

MaxCompute操作报错合集之spark3.1.1通过resource目录下的conf文件配置,报错如何解决
文章 2023-10-13 来自:开发者社区

【大数据开发技术】实验05-HDFS目录与文件的创建删除与查询操作

HDFS目录与文件的创建删除与查询操作一、实验目标熟练掌握hadoop操作指令及HDFS命令行接口掌握HDFS目录与文件的创建方法和文件写入到HDFS文件的方法掌握HDFS目录与文件的删除方法掌握查询文件状态信息和目录下所有文件的元数据信息的方法二、实验要求给出主要实验步骤成功的效果截图。要求分别在本地和集群测试,给出测试效果截图对本次实验工作进行全面的总结。完成实验内容后,实验报告文件名加上学....

【大数据开发技术】实验05-HDFS目录与文件的创建删除与查询操作
文章 2023-06-30 来自:开发者社区

大数据数据存储的分布式文件系统的HDFS的基本使用的命令行接口的创建目录/文件

使用 mkdir 命令可以创建一个新的目录,使用 rmdir 命令可以删除一个已经存在的目录。 使用 touch 命令可以创建一个新的文件,使用 chmod 命令可以修改文件的权限。 使用 chown 命令可以修改文件或目录的所有者。 在下一篇博客中,我们将进一步介绍HDFS的基本使用的命令行接口的创建目录/文件,希望大家能够继续关注。

问答 2023-06-28 来自:开发者社区

MaxCompute有没有一个命令可以列出oss某个Bucket里某目录下所有文件的路径?

MaxCompute有没有一个ossutil命令可以列出oss某个Bucket里某目录下所有文件的路径?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxCompute文件相关内容

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

阿里巴巴大数据计算

阿里大数据官方技术圈

+关注