云原生大数据计算服务 MaxCompute spark环境配置的相关内容

阿里云文档 2024-11-25

管理Spark Thrift Server会话

Spark Thrift Server是Apache Spark提供的一种服务，支持通过JDBC或ODBC连接并执行SQL查询，从而便捷地将Spark环境与现有的商业智能（BI）工具、数据可视化工具及其他数据分析工具集成。本文主要为您介绍如何创建并连接Spark Thrift Server。

阿里云文档 2024-11-22

运行环境管理

Notebook当前已默认安装matplotlib、numpy和pandas。如果您需要使用其他第三方库，可以创建运行环境。

阿里云文档 2024-11-13

DataWorks中EMR Serverless Spark版本的用户画像分析的加工数据阶段

本文为您介绍如何用Spark SQL创建外部用户信息表ods_user_info_d_spark以及日志信息表ods_raw_log_d_spark访问存储在私有OSS中的用户与日志数据，通过DataWorks的EMR Spark SQL节点进行加工得到目标用户画像数据，阅读本文后，您可以了解如何通过Spark SQL来计算和分析已同步的数据，完成数仓简单数据加工场景。

阿里云文档 2024-11-07

全面降价

为秉承普惠开发者的宗旨，并结合产品对引擎能力的持续优化，EMR Serverless Spark按量付费商品预计于2024年11月12日10:00（UTC+8）起全面降价，以将引擎能力优化所带来的红利回馈给客户。

文章 2024-10-14 来自：开发者社区

大数据-81 Spark 安装配置环境集群环境配置超详细三台云服务器

点一下关注吧！！！非常感谢！！持续更新！！！目前已经更新到了： Hadoop（已更完） HDFS（已更完） MapReduce（已更完） Hive（已更完） Flume（已更完） Sqoop（已更完） Zookeeper（已更完） HBase（已更完） Redis （已更完） Kafka（已更完） ...

阿里云文档 2024-08-27

Serverless Spark功能发布记录（2024年8月20日）

本文为您介绍2024年8月20日发布的EMR Serverless Spark的重大功能变更。

文章 2022-02-16 来自：开发者社区

《Spark大数据分析实战》——2.1节Spark应用开发环境配置

本节书摘来自华章社区《Spark大数据分析实战》一书中的第2章，第2.1节Spark应用开发环境配置，作者高彦杰　倪亚宇，更多章节内容可以访问云栖社区“华章社区”公众号查看 2.1　Spark应用开发环境配置Spark的开发可以通过Intellij或者Eclipse IDE进行，在环境配置的开始阶段，还需要安装相应的Scala插件。2.1.1　使用Intellij开发Spark程序本节介绍如何使....

文章 2022-02-16 来自：开发者社区

《Spark大数据分析实战》——第2章Spark开发与环境配置

本节书摘来自华章社区《Spark大数据分析实战》一书中的第2章Spark开发与环境配置，作者高彦杰　倪亚宇，更多章节内容可以访问云栖社区“华章社区”公众号查看第2章Spark开发与环境配置用户进行Spark应用程序开发，一般在用户本地进行单机开发调试，之后再将作业提交到集群生产环境中运行。下面将介绍Spark开发环境的配置，如何编译和进行源码阅读环境的配置。用户可以在官网上下载最新的AS软件包....