文章 2024-10-14 来自:开发者社区

大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(已更完) ...

大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比
文章 2024-08-29 来自:开发者社区

centos7通过CDH部署Hadoop

一、角色分配及安装环境准备 资料下载地址: 链接: 百度网盘 1.机器及机器角色规划 2.关闭防火墙及SELinux 3.安装依赖(server) yum install -y...

centos7通过CDH部署Hadoop
文章 2024-08-28 来自:开发者社区

centos7通过Ambari2.74部署Hadoop

阅读目录 一、前言 二、部署前环境准备 三、ambari服务部署 四、通过ambari控制台安装Hadoop集群 五、集群扩容 五、开启namenod、resourcemanager和HBase高可用 回到顶部 一、前言 服务器:建议第一台内存不少于16G,其他可以8G ...

centos7通过Ambari2.74部署Hadoop
文章 2024-04-09 来自:开发者社区

centos 部署Hadoop-3.0-高性能集群(二)

上一篇主要说的是安装 这一片说说怎么使用 启动  [hadoop@146 hadoop-3.0.0]$ ./sbin/start-all.sh 1、查看进程,此时master有进程:namenode和 secondarynamenode进程:     ps -axu | grep namenode --color ...

centos 部署Hadoop-3.0-高性能集群(二)
文章 2024-04-09 来自:开发者社区

centos 部署Hadoop-3.0-高性能集群(一)安装

Hadoop概述:Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS分布式文件系统为海量的数据提供了存储,则MapReduce为海量的数据提供了计算。 网方网站:http://hadoop.apa...

centos 部署Hadoop-3.0-高性能集群(一)安装
文章 2023-11-13 来自:开发者社区

:大数据行业部署实战3:基于Hadoop的Web版的云盘

一、实验目的熟练采用JAVA API访问 HDFS。二、实验原理HDFS是hadoop平台的核心组成之一。熟悉使用hadoop平台需要熟练访问HDFS。HDFS的访问方式有多种。可通过web访问,也可通过shell方式或者API方式访问。基本操作有对文件的读、写、追加、删除等。新建文件夹、删除文件夹等。还可显示文件及文件夹的属性。HDFS主要用到了FileSystem类࿰...

:大数据行业部署实战3:基于Hadoop的Web版的云盘
文章 2023-11-13 来自:开发者社区

大数据行业部署实战1:Hadoop伪分布式部署

一、Hadoop 介绍Apache Hadoop 软件库是一个框架,允许在集群服务器上使用简单的编程模型对大数据集进行分布式处理。Hadoop 被设计成能够从单台服务器扩展到数以千计的服务器,每台服务器都有本地的计算和存储资源。Hadoop 的高可用性并不依赖硬件,其代码库自身就能在应用层侦测并处理硬件故障,因此能基于服务器集群提供高可用性...

大数据行业部署实战1:Hadoop伪分布式部署
文章 2023-09-23 来自:开发者社区

docker 部署 hadoop集群

$stringUtil.substring( $!{XssContent1.description},200)...

docker 部署 hadoop集群
问答 2023-06-20 来自:开发者社区

flink on yarm 部署,flink与hadoop 需要安装在同台机器上吧

flink与hadoop 需要安装在同台机器上吧

问答 2023-03-17 来自:开发者社区

实验部署hadoop出现问题

HTTP request sent, awaiting response... 404 Not Found 2023-03-17 14:52:19 ERROR 404: Not Found.

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

大数据

大数据计算实践乐园,近距离学习前沿技术

+关注