AI 助理
文档备案控制台
文章 2016-12-02 来自：开发者社区

启动Hadoop HA Hbase zookeeper spark

服务器角色 服务器 192.168.58.180 192.168.58.181 192.168.58.182 192.168.58.183 Name CentOSMaster Slvae1 Slave2 StandByNameNode NameNode  Yes      Yes DataNode    Yes  Yes &nb...

文章 2016-11-27 来自：开发者社区

spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包自带案例全面详解（java、python、r和scala）之Basic包下的JavaTC.java（图文详解）

spark-1.6.1-bin-hadoop2.6里Basic包下的JavaTC.java     /* * Licensed to the Apache Software Foundation (ASF) under one or more * contributor license agreements. See the NOTICE file distributed wi...

spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包自带案例全面详解（java、python、r和scala）之Basic包下的JavaTC.java（图文详解）
文章 2016-11-27 来自：开发者社区

spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包自带案例全面详解（java、python、r和scala）之Basic包下的SparkPageRank.scala（图文详解）

spark-1.6.1-bin-hadoop2.6里Basic包下的SparkPageRank.scala                                         /* * L...

spark-2.2.0-bin-hadoop2.6和spark-1.6.1-bin-hadoop2.6发行包自带案例全面详解（java、python、r和scala）之Basic包下的SparkPageRank.scala（图文详解）
文章 2016-10-20 来自：开发者社区

Apache Spark 1.6 Hadoop 2.6 Mac下单机安装配置

一、 下载资料 1. JDK 1.6 +  2. Scala 2.10.4 3. Hadoop 2.6.4  4. Spark 1.6    二、预先安装 1. 安装JDK 2. 安装Scala 2.10.4      解压安装包即可 3. 配置sshd    ssh-keygen&nbs...

文章 2016-09-08 来自：开发者社区

Hadoop、MapReduce、YARN和Spark的区别与联系

Hadoop、MapReduce、YARN和Spark的区别与联系 转载:http://www.aichengxu.com/view/1103036 2015-03-17 16:37 本站整理 浏览(454) （1） Hadoop 1.0 第一代Hadoop，由分布式存储系统HDFS和分布式计算框架 MapReduce组成，其中，HDFS由一个NameNode和多个Da...

文章 2016-07-19 来自：开发者社区

Spark应用(app jar)发布到Hadoop集群的过程

记录了Spark，Hadoop集群的开启，关闭，以及Spark应用提交到Hadoop集群的过程，通过web端监控运行状态。 1.绝对路径开启集群 （每次集群重启，默认配置的hadoop集群中tmp文件被清空所以需要重新format) 我的集群安装位置是/opt/hadoop下，可以根据自己路径修改。 /opt/hadoop/bin/hdfs namenode -format /...

问答 2016-06-01 来自：开发者社区

hadoop HA 集群中使用zeppline的Spark sql访问Hive数据失败

报错信息如下：

文章 2016-05-24 来自：开发者社区

Spark-基础-Spark编译与部署--Hadoop编译安装

1、编译Hadooop 1.1 搭建环境 1.1.1 安装并设置maven 1. 下载maven安装包，建议安装3.0以上版本，本次安装选择的是maven3.0.5的二进制包，下载地址如下 http://mirror.bit.edu.cn/apache/maven/maven-3/ 2. 使用ssh工具把maven包上传到/home/hadoop/uploa...

文章 2016-05-16 来自：开发者社区

脚本两则--用于快速部署HADOOP，SPARK这些（特别是VM虚拟机模板部署出来的）。。

感觉可能只是适合我自己的部署习惯吧，且只针对CENTOS6及以下版本，以后有时间，可能还是要改进。。 1，从VM的模块产生的虚拟机，如何快速搞定网络配置？ #!/bin/bash #usage:./init_cdh_sys.sh hostname hostip #generate the host from esxi template.must change NIC mac address...

文章 2016-05-05 来自：开发者社区

最全的大数据技术大合集：Hadoop家族、Cloudera系列、spark

大数据我们都知道hadoop，可是还会各种各样的技术进入我们的视野：Spark，Storm，impala，让我们都反映不过来。为了能够更好的架构大数据项目，这里整理一下，供技术人员，项目经理，架构师选择合适的技术，了解大数据各种技术之间的关系，选择合适的语言。 我们可以带着下面问题来阅读本文章： 1.hadoop都包含什么技术？ 2.Cloudera公司与hadoop的关系是什么，都有什么产品，....

本页面内关键词为智能算法引擎基于机器学习所生成，如有任何问题，可在页面下方点击"联系我们"与我们沟通。

apache spark更多hadoop相关

apache spark您可能感兴趣

Apache Spark 中国技术社区

阿里巴巴开源大数据技术团队成立 Apache Spark 中国技术社区，定期推送精彩案例，问答区数个 Spark 技术同学每日在线答疑，只为营造 Spark 技术交流氛围，欢迎加入！

+关注