文章 2023-03-01 来自:开发者社区

大数据开发之Hadoop 伪分布式安装(4)【完结】

大数据开发之Hadoop 伪分布式安装(4)查看 Hadoop 的基本信息查看 HDFS Web 界面HDFS Web 界面可以检查当前 HDFS 与 DataNode 的运行情况,打开步骤如下。打开浏览器 Firefox,在浏览器的地址栏中输入:10.0.2.15:50070,向下滑动页面,可以看...

大数据开发之Hadoop 伪分布式安装(4)【完结】
文章 2023-03-01 来自:开发者社区

大数据开发之Hadoop 伪分布式安装(3)

大数据开发之Hadoop 伪分布式安装(3)我们接着上一节,来配置Hadoop.Hadoop 环境配置1、配置 IP 和主机名下面分别通过命令查看本机的 IP 地址和主机名,并将 IP 地址和主机名写进 /etc/hosts 配置文件中,步骤如下:(1) 查看本机的 IP 地址,命令如下࿱...

大数据开发之Hadoop 伪分布式安装(3)
文章 2023-03-01 来自:开发者社区

大数据开发之Hadoop 伪分布式安装(2)

大数据开发之Hadoop 伪分布式安装(2)Hadoop 的下载与安装在介绍 Hadoop 的安装之前,先介绍一下 Hadoop 对各个节点的角色定义。Hadoop 可以分别从三个角度将主机划分为两种角色。第一,最基本的划分为 Master 和 Slave,即主人与奴隶;第二,从 HDFS 的角度&...

大数据开发之Hadoop 伪分布式安装(2)
文章 2023-03-01 来自:开发者社区

大数据开发之Hadoop 伪分布式安装(1)

Hadoop 伪分布式安装(1)在 Ubuntu 20.04.2.0 中进行 Hadoop 伪分布式安装,Centos的Hadoop 伪分布式安装在之后的章节。在安装 Hadoop 之前,需要先安装两个程序,分别为:(1) JDK。Hadoop 使用的是 Java 写的程序,Hadoop 的编译及 ...

大数据开发之Hadoop 伪分布式安装(1)
文章 2023-02-25 来自:开发者社区

ECS服务器搭建hadoop伪分布式(二)

配置并启动YARN前提:修改配置文件修改/opt/module/hadoop-2.7.2/etc/hadoop/yarn-env.shexport JAVA_HOME=/usr/java/jdk1.8.0_121修改前修改后修改/opt/module/hadoop-2.7.2/etc/hadoop/yarn-site.xml注意:第二value值是<!-...

ECS服务器搭建hadoop伪分布式(二)
文章 2023-02-25 来自:开发者社区

ECS服务器搭建hadoop伪分布式(一)

前提准备1)阿里云ECS服务器Centos7.52)Xshell或者其他和Linux交互的软件(本文用的Bitvise SSH软件)我用的是Bitvise SSH3)最好会vim操作(不会也没问题)不会的用软件把需要修改的文件下载下到本地修改完毕后在上传回去覆盖原来的文件4)hadoo...

ECS服务器搭建hadoop伪分布式(一)
文章 2023-02-01 来自:开发者社区

hadoop 配置 单机伪分布式

一、安装jdk:下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html然后移动到/opt/java目录下,解压缩 tar -zxvf jdk-9.0.1_linux-x64_bin.tar.gz配置环境变量:1、打开pr...

hadoop 配置 单机伪分布式
文章 2023-01-22 来自:开发者社区

大数据必知必会:Hadoop(2)伪分布式安装

安装前准备操作系统准备本次安装采用的操作系统是Ubuntu 20.04。更新一下软件包列表。sudo apt-get update安装Java 8+使用命令安装Java 8。sudo apt-get install -y openjdk-8-jdk配置环境变量。vi ~/.bashrc export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64让环境变.....

大数据必知必会:Hadoop(2)伪分布式安装
文章 2023-01-11 来自:开发者社区

hadoop伪分布式安装记录

引语:    最近想接触一些大数据相关的技术,所以有了这篇文章,其实就是记录一下自己学习hadoop的过程,如果文章中有啥写的不对的地方,还望指正(有java开发经验,但是是大数据小白一只,各位大神轻喷.)我先是在网上搜索了一波大数据应该要学些什么技术,基本上不约而同的都是指向了hadoop.    摘自维基百科:Ap...

hadoop伪分布式安装记录
文章 2023-01-01 来自:开发者社区

Centos下搭建Hadoop伪分布式(二)

修改 Hadoop 的配置文件Hadoop的配置文件位于安装目录的 /etc/hadoop 目录下,在本教程中即位于 /url/local/hadoop/etc/hadoop 目录下,需要修改的配置文件为如下两个:cd /usr/local/hadoop/etc/hadoop编辑 core-site.xml,修改节点的内容为如下所示:<...

Centos下搭建Hadoop伪分布式(二)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

大数据

大数据计算实践乐园,近距离学习前沿技术

+关注