文章 2024-05-20 来自:开发者社区

Spark编程实验四:Spark Streaming编程

一、目的与要求 1、通过实验掌握Spark Streaming的基本编程方法; 2、熟悉利用Spark Streaming处理来自不同数据源的数据。 3、熟悉DStream的各种转换操作。 4、熟悉把DStream的数据输出保存到文本文件或MySQL数据库中。 二、实验内容 1、参照教材示例,利用Spark Streaming对三种类型的基本数据源...

Spark编程实验四:Spark Streaming编程
文章 2024-05-20 来自:开发者社区

Spark编程实验三:Spark SQL编程

一、目的与要求 1、通过实验掌握Spark SQL的基本编程方法; 2、熟悉RDD到DataFrame的转化方法; 3、熟悉利用Spark SQL管理来自不同数据源的数据。 二、实验内容 1、Spark SQL基本操作        将下列JSON格式数据复制到Linux系统中,并保存命名为employee...

Spark编程实验三:Spark SQL编程

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!

+关注