阿里云文档 2025-01-17

Spark SQL交互式查询

如果您需要以交互式方式执行Spark SQL,可以指定Spark Interactive型资源组作为执行查询的资源组。资源组的资源量会在指定范围自动扩缩容,在满足您交互式查询需求的同时还可以降低使用成本。本文为您详细介绍如何通过控制台、Hive JDBC、PyHive、Beeline、DBeaver等客户端工具实现Spark SQL交互式查询。

阿里云文档 2024-12-19

ADB Spark SQL的使用

DataWorks的ADB Spark SQL节点可进行AnalyticDB Spark SQL任务的开发和周期性调度,以及与其他作业的集成操作。本文为您介绍使用ADB Spark SQL节点进行任务开发的主要流程。

阿里云文档 2024-10-17

通过Spark SQL读写Azure Blob Storage外表

本文主要介绍如何在云原生数据仓库 AnalyticDB MySQL 版中使用Spark SQL读写Azure Blob Storage中的数据。

阿里云文档 2024-10-14

Spark SQL诊断优化

云原生数据仓库 AnalyticDB MySQL 版推出Spark SQL诊断功能,若您提交的Spark SQL存在性能问题,您可以根据诊断信息快速定位、分析并解决性能瓶颈问题,优化Spark SQL。本文主要介绍如何进行Spark SQL性能诊断以及性能诊断的示例。

阿里云文档 2024-09-06

通过Spark SQL读DLF管理的数据

数据湖构建 DLF(Data Lake Formation)提供了统一的元数据管理、统一的权限与安全管理、便捷的数据入湖能力以及一键式数据探索能力,您可以在云原生数据仓库 AnalyticDB MySQL 版中通过Spark SQL访问DLF中的元数据。

问答 2024-06-13 来自:开发者社区

MaxCompute spark SQL查询分区表数据报错java.lang.String c...

MaxCompute spark SQL查询分区表数据报错java.lang.String cannot be cast to java.lang.Integer

问答 2024-06-13 来自:开发者社区

MaxCompute中使用Spark如何处理org.apache.spark.sql.Anal...

MaxCompute中使用Spark如何处理org.apache.spark.sql.AnalysisException: alter table data schema not supported报错

问答 2024-05-24 来自:开发者社区

MaxCompute Spark与sql运行速度差距大

MaxCompute Spark与sql运行速度差距大

问答 2024-03-18 来自:开发者社区

使用maxcompute开发ODPS Spark任务,使用spark.sql 无法 rename分区

使用maxcompute开发ODPS Spark任务,使用spark.sql 执行rename分区 sql: alter table $tableName partition(date='$dateFrom',source_id=$sourceFrom) rename to partition(date='$dateTo',source_id=$sourceTo), 任务报错退出。 报错信息如下....

文章 2022-02-17 来自:开发者社区

MaxCompute Spark与Spark SQL对比分析及使用注意事项

演讲嘉宾简介:沐行,阿里云智能技术支持工程师。 本次直播视频精彩回顾,戳这里!以下内容根据演讲视频以及PPT整理而成。本次分享主要围绕以下三个方面: 一、功能特性二、代码开发三、DataWorks模式 一、功能特性 1.Spark部署模式Spark开源文档中表明部署模式支持几种部署模式,如stand alone模式、on yarn模式、on k8s模式等。但是其中并不包括Spark on Max....

MaxCompute Spark与Spark SQL对比分析及使用注意事项

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注