文章 2025-03-02 来自:开发者社区

基于云服务器的数仓搭建-hive/spark安装

mysql本地安装 安装流程(内存占用200M,升至2.1G) # 将资料里mysql文件夹及里面所有内容上传到/opt/software/mysql目录下 mkdir /opt/software/mysql cd /opt/software/mysql/ # 待上传文件 ins...

基于云服务器的数仓搭建-hive/spark安装
阿里云文档 2025-02-17

如何安装Spark单机版

资源编排服务ROS(Resource Orchestration Service)支持通过创建资源栈的方式安装Spark单机版。

问答 2024-08-19 来自:开发者社区

如何在不依赖Spark的情况下,使用Python安装并读取Delta Lake表?

如何在不依赖Spark的情况下,使用Python安装并读取Delta Lake表?

文章 2024-06-21 来自:开发者社区

Spark-集群安装、部署、启动、测试(1.6.3)稳定版

Spark-集群安装、部署、启动、测试(1.6.3版) 一、下载地址: http://spark.apache.org/releases/spark-release-1-6-3.html 二、安装 将...

Spark-集群安装、部署、启动、测试(1.6.3)稳定版
文章 2024-04-22 来自:开发者社区

Spark【环境搭建 01】spark-3.0.0-without 单机版(安装+配置+测试案例)

我使用的安装文件是 spark-3.0.0-bin-without-hadoop.tgz ,以下内容均以此版本进行说明。使用 without 版本的安装包要进行 spark 和 hadoop 的关联配置【hadoo的版本是3.1.3】。 1.1 解压 我使用的是之前下载的安装包,也可以去官网下载,选择 Spark 版本【最新版本是3.1.2】和对应的 H...

Spark【环境搭建 01】spark-3.0.0-without 单机版(安装+配置+测试案例)
文章 2024-03-14 来自:开发者社区

安装Spark

安装Spark 任务描述 本关任务:完成Spark安装。 相关知识 Apache Spark 是一个新兴的大数据处理通用引擎,提供了分布式的内存抽象。Spark 最大的特点就是快,可比 Hadoop MapReduce 的处理速度快 100 倍。本节将详细说明 Spark 的安装。 下载Spark 首先需要下载Spark安装文件。访问Spark官方...

安装Spark
文章 2024-03-08 来自:开发者社区

Spark【Spark学习大纲】简介+生态+RDD+安装+使用(xmind分享)

Spark学习大纲 自学阶段整理的xmind思维导图分享。

Spark【Spark学习大纲】简介+生态+RDD+安装+使用(xmind分享)
文章 2023-12-20 来自:开发者社区

【大数据技术Hadoop+Spark】Flume、Kafka的简介及安装(图文解释 超详细)

Flume简介Flume是Cloudera提供的一个高可用、高可靠、分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。Flume主要由3个重要的组件构成:1)Source:完成对日志数据的收集,分成transtion 和 event 打入到channel之中。2)Cha....

【大数据技术Hadoop+Spark】Flume、Kafka的简介及安装(图文解释 超详细)
文章 2023-11-13 来自:开发者社区

window环境下安装spark

原文window环境下安装spark这个非常成功https://zhuanlan.zhihu.com/p/149469688加上参考https://blog.csdn.net/ruangaoyan/article/details/100154959完善:在Windows上安装Apache SparkApache Spark是一个强大的开源分布式计算框架,通常用于大数据处理和分析。尽管Spark的....

文章 2023-11-01 来自:开发者社区

179 Spark集群安装

1.准备两台以上Linux服务器,安装好JDK1.72.下载Spark安装包http://www.apache.org/dyn/closer.lua/spark/spark-1.5.2/spark-1.5.2-bin-hadoop2.6.tgz3.上传解压安装包上传spark-1.5.2-bin-hadoop2.6.tgz安装包到Linux上,解压安装包到指定位置。tar -zxvf spark....

179 Spark集群安装

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等