阿里云文档 2026-02-02

Serverless Spark支持通过自动或手动解冻OSS归档文件,确保SQL作业连续执行,需版本esr-4.4.0及以上。

当Spark作业需读取OSS归档存储中的数据时,因文件处于冻结状态无法直接访问,导致任务失败。本功能支持自动或手动触发解冻流程,确保作业正常执行,提升冷数据处理效率。

阿里云文档 2026-01-30

阿里云EMR Serverless Spark Notebook集成DuckDB,支持免密访问OSS/OSS-HDFS并高效操作多种数据格式。

阿里云EMR Serverless Spark Notebook集成了DuckDB,并增强了其与云上数据源的集成能力。用户除了可以免密访问OSS/OSS-HDFS并高效操作多种格式的数据文件外,还可以直接通过SQL查询DLF(数据湖构建)中定义的元数据表,实现对数据湖的一站式、轻量化探索与分析。

阿里云文档 2025-10-10

本方案通过阿里云OSS实现HDFS数据跨可用区冷备与快速恢复,保障业务连续性。

单可用区故障可能导致 HDFS 数据丢失及服务中断。本方案通过 OSS 跨可用区存储实现定期冷备,以便在故障发生时迅速启动新的集群并恢复数据,从而保障业务的连续性。

阿里云文档 2025-07-04

通过RootPolicy访问OSS-HDFS

OSS-HDFS服务支持RootPolicy。通过RootPolicy,您可以为OSS-HDFS服务设置自定义前缀。此功能使得Serverless Spark能够在无需修改原有访问hdfs://前缀的任务的情况下,直接操作OSS-HDFS上的数据。

阿里云文档 2025-06-05

使用Hadoop命令操作OSS/OSS-HDFS

在使用阿里云EMR Serverless Spark的Notebook时,您可以通过Hadoop命令直接访问OSS或OSS-HDFS数据源。本文将详细介绍如何通过Hadoop命令操作OSS/OSS-HDFS。

问答 2024-07-17 来自:开发者社区

阿里云E-MapReduce中oss在这个do-while循环期间如果有新创建的文件是否能读取到呢?

阿里云E-MapReduce中oss在这个do-while循环期间,如果有新创建的文件是否能读取到呢?

问答 2024-06-13 来自:开发者社区

MaxCompute提交mapreduce作业处理oss上的数据报错Exception in ...

MaxCompute提交mapreduce作业处理oss上的数据报错Exception in thread "main" org.apache.hadoop.fs.UnsupportedFileSystemException: No FileSystem for scheme "oss" at

问答 2024-06-13 来自:开发者社区

E-MapReduce上如何迁移HDFS数据到OSS

E-MapReduce上如何迁移HDFS数据到OSS

问答 2024-06-11 来自:开发者社区

如果新开通E-MapReduce集群选择数据湖服务所有数据都存在OSS上吗

如果新开通E-MapReduce集群选择数据湖服务所有数据都存在OSS上吗

问答 2024-06-09 来自:开发者社区

E-MapReduce使用jindoFS block模式配置的oss桶是否需要开启oss-hd...

E-MapReduce使用jindoFS block模式配置的oss桶是否需要开启oss-hdfs服务

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

对象存储OSS

对象存储 OSS 是一款安全、稳定、高性价比、高性能的云存储服务,可以帮助各行业的客户在互联网应用、大数据分析、机器学习、数据归档等各种使用场景存储任意数量的数据,以及进行任意位置的访问,同时通过丰富的数据处理能力更便捷地使用数据。

+关注