虚拟机上使用Hadoop【1】安装

最新推荐文章于 2022-09-14 13:19:01 发布
原创 最新推荐文章于 2022-09-14 13:19:01 发布 · 274 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hadoop

本文详细介绍如何在虚拟机中安装配置Hadoop，包括下载并安装虚拟机镜像，以及在Linux系统中启动和停止Hadoop集群的具体步骤。

虚拟机上使用Hadoop【1】安装

涉及到的工作主要分为以下2点：

  • 安装虚拟机
  • 安装含有Hadoop的Linux系统
安装虚拟机

这部分我在之前的文章中曾经提到过，可以参考VMware WorkStation + Ubuntu win10系统安装 这篇博客中详细介绍了win10系统中安装虚拟机的一系列注意事项。

安装含有Hadoop的Linux系统

这部分内容参考的是我导师的讲义：
下载虚拟机镜像文件

按照要求正确安装后，即可登入Linux系统
账号:Hadoop，密码:Hadoop

启动Hadoop

cd /usr/local/hadoop/sbin
./start-all.sh

在这里插入图片描述
终止Hadoop集群

cd /usr/local/hadoop/sbin
./stop-all.sh

在这里插入图片描述
至此，Hadoop安装与试用完成，接下来将介绍Hadoop的使用方法。

虚拟机上使用Hadoop【0】

Doris404
关注
Hadoop环境配置（3）-虚拟机连接Moba
m0_65077609的博客
12-17 1426
一、虚拟机连接MobaXterm 下载安装MobaXterm 1.打开虚拟机Hadoop100 2.打开MobaXterm 第一格填入虚拟机的IP地址 第二格填入虚拟机的用户名 此时连接成功 若连接超时则证明无法ping通虚拟机的IP地址，要去查看下虚拟机的IP和防火墙与电脑的防火墙 二、本地部署 1、在/opt 下创建两个文件夹：software、module 2、software：放软件的压缩包 module：放软件解压后的文件夹 3、切换到software文件夹下...
Hadoop在linux虚拟机上的伪分布式安装
zndeID_的博客
02-27 339
在opt下创建soft目录，并将hadoop文件和jdk上传至soft下。关闭SELINUX（将SELINUX属性的值改为disabled）主机名和IP映射（进入文件之后，添加当前主机的IP和主机名）修改主机名（将原来的主机名删除，添加自己设定的主机名）创建安装目录，并将hadoop文件解压到安装目录下。格式化NameNode（第一次启动需要格式化）配置环境变量（设置JAVA_HOME）解压jdk压缩包，并配置其环境变量。/etc/profile使它生效。esc退出编辑模式,wq保存退出。
虚拟机上使用Hadoop【0】序
kullollo的博客
04-20 180
初识Hadoop Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行运行和存储。 Hadoop中最重要的两个设计是：HDFS和MapReduce，其中HDFS为海量的数据提供了存储，而MapReduce则为海量的数据提供了计算。 可以说Hadoop是大数据时代分析海量数据的一大利器，在系列博客中将介绍 ...
hadoop搭建教程之安装虚拟机
weixin_44356081的博客
08-10 223
搭建前的准备操作 第一步安装好虚拟机VM软件 进行新建虚拟机 选择稍后进行安装 下一步 选择对应的系统版本 下一步 选持路径和虚拟机命名 下一步 点击自定义配件进行先择镜像 点击完成 ...
2.Hadoop环境配置之虚拟机安装配置
shield911的博客
09-14 1万+
虚拟机下载安装配置和克隆
虚拟机安装配置Hadoop（图文教程）
是微风，是晚霞，是无可替代
09-03 1万+
启动镜像 Init1.0检查是否安装 Hdoop 和 jdk。
Linux虚拟机上Hadoop伪分布式安装方法及实例检测
09-28
【Linux虚拟机上Hadoop伪分布式安装方法及实例检测】 Hadoop是一个开源的分布式计算框架，主要用于处理和存储大量数据。在Linux虚拟机上安装Hadoop的伪分布式模式，是学习和测试Hadoop功能的理想方式，因为它可以在...
Centos虚拟机上使用cmd安装hadoop
最新发布
06-17
在CentOS虚拟机上安装Hadoop可以通过命令行完成，以下是详细的步骤和说明[^1]。为了确保成功安装，需要准备以下环境：Linux系统（CentOS 7）、JDK 1.8、Hadoop（如Hadoop-3.3.1）以及虚拟机软件（如VMware ...
在CentOS虚拟机上安装hadoop步骤明细
u011146843的博客
05-22 1312
1>修改主机名 vim /etc/sysconfig/network 2>修改网卡配置文件(配置静态的固定ip地址) vim /etc/sysconfig/network-scripts/ifcfg-eth0 DEVICE=eth0 TYPE=Ethernet ONBOOT=yes NM_CONTROLLED=yes BOOTPROTO=static IPADDR= 10.10...
Mac上在vm虚拟机上搭建Hadoop集群并安装zookeeper hive hbase（下篇）
今天敲代码了嘛？
09-09 1235
mac hadoop zookeeper hive hbase
最新虚拟机搭建hadoop环境详细图文教程
热门推荐
adnb34g的博客
07-28 2万+
前两天看到有人留言问在什么情况下需要部署hadoop，我给的回答也很简单，就是在需要处理海量数据的时候才需要考虑部署hadoop。关于这个问题在很早之前的一篇分享文档也有说到这个问题，数据量少的完全发挥不了hadoop的优势，所以也没必要部署。但对于正在学习hadoop的朋友来说，hadoop运行环境部署真的是件非常头疼的事情。 计划在接下来的一段时间里，以我之前学习研究大快搜索DKHadoop...
使用VMware安装Hadoop全过程
haishangshengren的专栏
08-05 5030
前言：       从七月中旬开始大规模学习hadoop平台搭建过程，虽然现在看来，解决很实现的问题并不多，但是对于一个以前没有接触过linux、java和云计算平台的人来说，确实也花了一段时间。最大的感慨是，各种工具的版本问题，十分重要，Vmware、ubuntu、jdk
在虚拟机中安装单机Hadoop
qq_38270906的博客
04-12 6743
安装单机Hadoop系统一、所用软件版本虚拟机：VMware_workstation_full_12.5.2操作系统：ubuntu-16.04.2-desktop-amd64HADOOP：hadoop-2.7.3.tarJDK: jdk-8u121-linux-x64.tar二、JDK的配置1.将/home/software/jdk-8u121-linux-x64.tar进行解压2.将解压后的jd...
Hadoop初体验（2）：使用Xshell连接VMware虚拟机CentOS
OPM的博客
02-21 1395
        因为是用虚拟机实现Hadioop环境搭建，所以主要使用VMware来完成。主要写一下VMware的安装和Xshell连接问题。 一、VMware虚拟机安装         我这里选择的是VMware Workstation Pro 15 官方中文版，官网上有最新的两个版本的下载链接，各种博客也有注册码。要注意的网上的注册码和注册机基本都是针对Pro 15的版本，最开始安装的是普...
虚拟机-Linux-CentOS 7吐血安装Hadoop2.9.2搭建集群教程（详细图解）
H_X_P_的博客
04-24 1813
虚拟机-Linux-CentOS 7吐血安装Hadoop2.9.2搭建集群教程（详细图解）
Windows环境下采用eclipse连接虚拟机中的Hadoop伪分布式集群
quintind的专栏
09-06 1万+
目的及意义 学会搭建伪分布式集群环境，以便于理解MapReduce及HDFS； 采用eclipse与伪分布式集群连接有利于分布式程序的调试； 现在网络上的文章多是介绍如何搭建伪分布式集群或者是仅介绍在eclipse中如何连接已建立好的伪分布式集群，且大部分介绍都是基于hadoop1.x系列。 软件列表 序号 软件名称 功能 1 hadoop-2.6.0-x64.tar.gz 实
hadoop之虚拟机安装hadoop
我爱小小
05-13 9335
我使用的是W7系统，要安装Hadoop；但是想在Linux下运行Hadoop，一个非常好的选择是虚拟机；我使用的是Vmware和Ubuntu server 14； 1、下载Hadoop； 进入官网下载：http://hadoop.apache.org/releases.html 按需下载版本：我下载了2.7.3版本 2、制作成ISO 文件，挂载 设置虚拟机光盘位置： 在虚
虚拟机上运行hadoop的jar包程序。
Ben Lee的博客
05-21 3155
首先，我们在win环境下用Eclipse写好程序，然后导出jar包，我这里是放到虚拟机的root目录下，叫wc.jar。
在虚拟机上安装Hadoop集群
森的博客
06-01 5985
首先介绍一下安装流程：1下载hadoop2安装3个虚拟机并实现ssh免密码登录        2.1安装3个机器        2.2检查机器名称        2.3修改/etc/hosts文件        2.4 给3个机器生成秘钥文件        2.5 在hserver1上创建authorized_keys文件        2.6将authorized_keys文件复制到其他机器  ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值