阿里云文档 2026-04-08

Lindorm Spark SQL节点,Lindorm Spark SQL

DataWorks的Lindorm Spark SQL节点可进行Lindorm Spark SQL任务的开发和周期性调度。本文为您介绍使用Lindorm Spark SQL节点进行任务开发的主要流程。

阿里云文档 2026-02-02

Serverless Spark支持通过自动或手动解冻OSS归档文件,确保SQL作业连续执行,需版本esr-4.4.0及以上。

当Spark作业需读取OSS归档存储中的数据时,因文件处于冻结状态无法直接访问,导致任务失败。本功能支持自动或手动触发解冻流程,确保作业正常执行,提升冷数据处理效率。

阿里云文档 2025-11-19

如何通过Spark SQL读写RDS PostgreSQL数据

云原生数据仓库 AnalyticDB MySQL 版支持提交Spark SQL作业,您可以通过View方式访问自建PostgreSQL数据库或云数据库 RDS PostgreSQL 版数据库。本文以RDS for PostgreSQL为例,介绍如何通过Spark SQL读写RDS for PostgreSQL数据。

阿里云文档 2025-06-19

通过Spark SQL读写Iceberg外表

本文主要介绍如何在云原生数据仓库 AnalyticDB MySQL 版中使用Spark SQL读写Iceberg外表。

阿里云文档 2025-04-17

通过Spark SQL读写SQL Server数据

云原生数据仓库 AnalyticDB MySQL 版支持提交Spark SQL作业,您可以通过View方式访问自建SQL Server数据库或云数据库 RDS SQL Server 版数据库。本文以云数据库 RDS SQL Server 版为例,介绍如何通过Spark SQL访问SQL Server数据。

文章 2025-01-16 来自:开发者社区

Spark SQL向量化执行引擎框架Gluten-Velox在AArch64使能和优化

Spark SQL向量化执行引擎框架Gluten-Velox在AArch64使能和优化 内容分析: 1. 技术背景 2. 算子库构成 3. 算子操作优化 4. 未来工作   01、技术背景 下图描述了当今大数...

Spark SQL向量化执行引擎框架Gluten-Velox在AArch64使能和优化
问答 2024-07-23 来自:开发者社区

MRACC-Spark的SQL引擎优化主要体现在哪些方面?

MRACC-Spark的SQL引擎优化主要体现在哪些方面?

文章 2023-12-25 来自:开发者社区

Note_Spark_Day08:Spark SQL(Dataset是什么、外部数据源、UDF定义和分布式SQL引擎)

Spark Day08:Spark SQL01-[了解]-昨日课程内容回顾上次课程主要讲解3个方面内容:SparkSQL模块概述、DataFrame数据集及综合案例分析。1、SparkSQL 模块概述 - 发展史【前世今生】 Shark -> SparkSQL(1.0) -> DataFrame(1.3) -> Dataset(1.6) -> Dataset/...

Note_Spark_Day08:Spark SQL(Dataset是什么、外部数据源、UDF定义和分布式SQL引擎)
文章 2023-09-17 来自:开发者社区

大数据Spark分布式SQL引擎

1 Spark SQL CLI回顾一下,如何使用Hive进行数据分析的,提供哪些方式交互分析???方式一:交互式命令行(CLI)1.bin/hive,编写SQL语句及DDL语句方式二:启动服务HiveServer2(Hive ThriftServer2)1.将Hive当做一个服务启动(类似MySQL数据库,启动一个服务),端口为100002.1)、交互式命令行,bin/beeline,CDH 版....

大数据Spark分布式SQL引擎
问答 2022-06-13 来自:开发者社区

Spark SQL引擎支持了window topn排序有哪些新增功能?

Spark SQL引擎支持了window topn排序有哪些新增功能?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注