阿里云文档 2025-07-04

通过RootPolicy访问OSS-HDFS

OSS-HDFS服务支持RootPolicy。通过RootPolicy,您可以为OSS-HDFS服务设置自定义前缀。此功能使得Serverless Spark能够在无需修改原有访问hdfs://前缀的任务的情况下,直接操作OSS-HDFS上的数据。

阿里云文档 2025-07-04

管理自定义配置文件

自定义配置文件功能支持根据特定需求创建个性化配置,灵活控制任务执行环境。支持多种文件格式(如XML和JSON),确保配置的安全性和一致性,并可直接应用于各类任务(如批处理、会话等)。

阿里云文档 2025-07-04

管理Spark配置模板

Spark配置模板用于定义全局默认配置,支持创建、编辑和管理任务运行所需的参数。通过集中维护 Spark 配置信息,确保任务执行的一致性和灵活性,同时支持动态更新以满足多样化业务需求。

阿里云文档 2025-06-16

读写MySQL

Spark原生支持通过JDBC Connector访问MySQL。Serverless Spark在启动时将自动加载MySQL JDBC驱动(版本 8.0.33)。您可以通过SQL会话、批处理任务或Notebook等方式连接MySQL,从而实现数据的读取与写入操作。

阿里云文档 2025-06-13

2025-06-05版本说明

本文为您介绍2025年06月05日发布的EMR Serverless Spark的功能变更。

问答 2024-07-15 来自:开发者社区

E-MapReduce集群使用notebook连接spark-sql报错The request...

E-MapReduce集群使用notebook连接spark-sql报错The request has failed due to a temporary failure of the server

问答 2024-06-10 来自:开发者社区

E-MapReduce的3.46.0集群spark报错CLassNotFoundFoundEx...

E-MapReduce的3.46.0集群spark报错CLassNotFoundFoundException:com.aliyun.emr.metaspark.listener.EMRQueryLogger

问答 2024-06-09 来自:开发者社区

E-MapReduce spark报错User admin does not have per...

E-MapReduce spark报错User admin does not have permission to submit

问答 2024-06-07 来自:开发者社区

E-MapReduce使用spark-submit提交spark作业偶尔报错日志中的关键信息为...

E-MapReduce使用spark-submit提交spark作业偶尔报错日志中的关键信息为:SIMPLE authentication is not enabled. Available:[TOKEN, KERBEROS]

问答 2023-11-19 来自:开发者社区

问下阿里云E-MapReduce spark-shell有SDK 报错找不到schema?

Caused by: org.apache.hadoop.hive.metastore.api.MetaException: Got exception: org.apache.hadoop.fs.UnsupportedFileSystemException No FileSystem for scheme "oss" at org.apache.hadoop.hive.metastore.a.....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐