[帮助文档] MapReduce、Pig、Hive和Spark示例项目

本文介绍的项目都是完整的可编译可运行的项目,包括MapReduce、Pig、Hive和Spark。

对于maven创建spark项目的pom.xml配置文件(图文详解)

                这里, 我重点说下spark项目,因为,对于hadoop这样的,我已经写了大量博客了。    比如,我目前用得较多的spark-mllib。   这里spark-mllib_2.10&nb...

大数据实战项目:反爬虫系统(Lua+Spark+Redis+Hadoop框架搭建)第一阶段

33 课时 |
283 人已学 |
免费

大数据实战项目 - 反爬虫系统(Lua+Spark+Redis+Hadoop框架搭建)第六阶段

21 课时 |
180 人已学 |
免费

大数据实战项目 - 反爬虫系统(Lua+Spark+Redis+Hadoop框架搭建)第七阶段

9 课时 |
324 人已学 |
免费
开发者课程背景图

Spark-项目中分析日志的核心代码

代码 LogRecord 类: case class LogRecord ( clientIpAddress: String, rfc1413ClientIdentity: String, remoteUser: String, ` dateTime: String, //[day/month...

flare-spork: 自己维护的Pig on Spark项目

关于flare-spork 很早以前有个Pig Spork分支,尝试把Pig迁移到Spark上,但是代码很久没有更新了。目前Pig on Spark应该是在Twitter内部进行着。 flare-spork是基于Spork对Pig和Spark的衔接,把Spark部分的代码迁移到了Pig 0.12.0...

我在Github上的flare-spark项目

Flare-Spark 介绍 我在自己的github上建了个flare-spark项目,本身是Apache Spark项目Master分支的镜像。在Spark的基础上,增加了flare子项目。 预计大多数改动都会增量添加到flare子项目里,尽量不改变Spark本身的代码。 新增的代码都会在线下机器...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

社区圈子

Apache Spark 中国技术社区
Apache Spark 中国技术社区
阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区,定期推送精彩案例,问答区数个 Spark 技术同学每日在线答疑,只为营造 Spark 技术交流氛围,欢迎加入!
4459+人已加入
加入
相关电子书
更多
云HBaseSQL及分析 ——Phoenix&Spark
R AND SPARK
Spark Autotuning
立即下载 立即下载 立即下载

apache spark项目相关内容