virtualbox虚拟机集群

最新推荐文章于 2024-03-14 07:49:16 发布
转载 最新推荐文章于 2024-03-14 07:49:16 发布 · 2.3k 阅读 · 1

本文详细介绍如何使用VirtualBox创建并配置三台CentOS6.5虚拟机，以搭建一个简易的全分布式Hadoop集群。包括虚拟机创建、网络配置、IP地址及主机名设定等关键步骤。

想利用虚拟机搭建简单的全分布式Hadoop集群，看到一篇博文写的非常好，参照操作的过程中有一些细节值得更详细的记录下来。这篇博客主要记录安装前的配置工作，因为比较菜鸟，所以详细到啰嗦。

首先把参考的博文列出来：http://blog.youkuaiyun.com/u014078192/article/details/26980991

软硬件配置：

x86台式机（内存4G, 可以开三个虚拟机），window7  64位系统

虚拟机VirtualBox

CentOS6.5操作系统

以上是安装Hadoop的软硬件配置，下面两个这篇博客中还用不到，博主还在钻研中。。。

hadoop-1.1.2.tar.gz
jdk-6u24-Linux-i586.b

下面就是详细的配置过程了。

一、虚拟机的创建和拷贝

1、在VirtualBox下创建CentOS6.5操作系统

CentOS的下载地址为http://www.centos.org/  

在VirtualBox新建虚拟电脑，名称为CentOS6.5-Master 操作系统类型选择Linux 版本为RadHat（64bit)

虚拟电脑内存大小设置为1024M

创建新的虚拟硬盘，类型为VDI 虚拟硬盘选择固定大小，设置为40G, 这里新创建的虚拟硬盘选择存放路径为D:\VirtualMachine\Master

安装过程可以参考《鸟哥的Linux私房菜》尤其是对硬盘的分区

这里在安装过程中创建了一个新的普通用户，用户名sunnie 密码19830304

2、虚拟机的拷贝

为了节省时间，可以直接拷贝上面的CentOS6.5操作系统，创建另外两个新的虚拟电脑，拷贝过程如下：

创建一个新的文件夹D:\VirtualMachine\Slave1, 将上面创建的虚拟硬盘D:\VirtualMachine\Master\CentOS6.5-Master.vdi复制到该文件夹中，并修改名称为CentOS6.5-Slave1.vdi

打开CMD命令行，切换到VirtualBox的安装目录，我装在E盘，所以要切换到E:\Program Files\Oracle\VirtualBox目录下

输入命令VBoxManage internalcommands sethduuid D:\VirtualMachine\Slave1\CentOS6.5-Slave1.vdi 可以看到UUID changed to: ac6bec79-7b98-41e4-9d38-7561b1d38acc 说明虚拟硬盘的UUID分配成功，接下来就可以用D:\VirtualMachine\Slave1中的CentOS6.5-Slave1.vdi创建另一台虚拟电脑了

在VirtualBox中新建名称为CentOS6.5-Slave1 的虚拟电脑，使用已有的虚拟硬盘D:\VirtualMachine\Slave1\CentOS6.5-Slave1.vdi  这样就复制好另一个虚拟电脑

重复上述方法，复制出第三台虚拟电脑，名称为CentOS6.5-Slave2

二、虚拟机的网络配置

经过上面虚拟机的创建和复制，现在VirtualBox中存在三个虚拟电脑，名称分别为CentOS6.5-Master 、CentOS6.5-Slave1和CentOS6.5-Slave2下面对它们进行IP地址和主机名的配置，目标是使这三台虚拟机能相互ping通。

1、网卡的设置

这里以CentOS6.5-Master的配置为例。首先关闭虚拟机。在VirtualBox中选中CentOS6.5-Master, 设置其网络连接方式为桥接网卡

用root用户身份虚拟机CentOS6.5-Master进行网卡设置。VirtualBox进行虚拟机复制的时候，网卡编号会发生变化，这里先将网卡编号改回eth0。修改过程见http://www.linuxidc.com/Linux/2012-09/70025.htm

 首先 修改70-persistent-net.rules文件。vim /etc/udev/rules.d/70-persistent-net.rules 将前面出现的PCI device配置信息注释掉，保留最后一个，记录其MAC地址，并修改NAME=“eth0"

然后修改网卡的配置信息。 vim /etc/sysconfig/network-scripts/ifcfg-eth0  把HWADDR的值改为上一步中记录的MAC地址。这样网卡编号就改回了eth0

2、IP地址和主机名的配置

三台虚拟机的主机名和IP地址配置如下：

虚拟机名称主机名IP地址
CentOS6.5-MasterMaster192.168.1.110
CentOS6.5-Slave1Slave1192.168.1.111
CentOS6.5-Slave2Slave2192.168.1.112

首先配置IP地址，同样以CentOS6.5-Master为例，配置过程如下：（详细内容参考http://blog.youkuaiyun.com/ei__nino/article/details/7641183）

打开System->Preference->Network  connections 设置IPv4 settings. Method选择Manual, 添加IP地址192.168.1.110 网关为192.168.1.1 设置完成后点击apply应用

vim /etc/sysconfig/network-scripts/ifcfg-eth0打开网卡的配置文件，在其中添加

IPADDR=192.168.1.110
NETMASK=255.255.255.0
GATEWAY=192.168.1.1
BOOTPROTO=static

然后配置主机名

输入命令vim /etc/sysconfig/network, 修改以下内容

NETWORKING=yes
HOSTNAME=Master

最后解析IP

输入命令vim /etc/hosts, 修改以下内容


其中第一行为自身IP地址的映射，127.0.0.1 还有个后面的localhost.localdomain localhost4 localhost4.localdomain4都代表本机

192.168.1.111和192.168.1.112分别可以映射到主机名Slave1和Slave2

以上配置完成后reboot重启，配置生效。另两台虚拟机CentOS6.5-Slave1和CentOS6.5-Slave2分别按照上述步骤进行配置，相应主机名和IP地址略有不同。

Hadoop学习（二）在VirtualBox上搭建Hadoop集群
zhangcjsyl的博客
03-23 4872
搭建单机hadoop参见上篇文章https://blog.youkuaiyun.com/zhangcjsyl/article/details/88322373，虚拟机和ubuntu操作系统的安装参见tps://blog.youkuaiyun.com/zhangcjsyl/article/details/8814258，本文在此两篇文章基础上进行搭建Hadoop集群环境。 一、整体规划 一主三从，整理如下： 主机名 ...
win10 VM VirtualBox 安装centos7集群
qq_25137131的博客
01-19 150
safd
virtualbox-cluster:一个（目前只有 3 个节点）virtualbox 集群，用于快速测试事物
06-23
Virtualbox 集群 一个 3 节点 Virtualbox 集群，用于快速测试分布式应用程序等。 先决条件 在 Ubuntu 中安装需求（用 14.04 测试） 安装虚拟机： sudo apt-get install virtualbox 安装最新版本的 ansible： sudo apt-get install ansible/trusty-backports （如果你的 ubuntu 版本是“可信的”，否则，用你合适的版本替换它） 安装 Vagrant，首先从下载正确的 .deb 文件 ...然后安装它： sudo dpkg -i < deb> 设置和使用 克隆 github 仓库： git clone git@github.com:samuell/virtualbox-cluster.git cd virtualbox-cluster 可选：添加/启用角色
虚拟机搭建hadoop的全分布式集群-in detail（1）
学习永远不嫌晚
06-02 3331
想利用虚拟机搭建简单的全分布式Hadoop集群，
Win7下用virtualbox 虚拟3台虚拟机搭建hadoop集群
边学边忘
10-07 4401
用了这么久的hadoop，只会使用streaming接口跑任务，各种调优还不熟练，自定义inputformat ， outputformat， partitioner 还不会写，于是干脆从头开始，自己搭一个玩玩，也熟悉一下整体架构。 整体环境： 主机Win7 i5 4核 8G内存 笔记本； 虚拟机采用Centos5.9 （ 用这个的原因是不想用图形界面，并且以后还想试着装一下ICE）
搭建VirtualBox虚拟机集群
诸葛建站
10-11 160
===============================VirtualBox常用网络===============================NetworkAddress Translation(NAT)NAT 是VirtualBox建立的虚拟机默认的形式. 虚拟机之间无法沟通, 虚拟机能连接外部网络. GuestOS只能看到从Host发来的数据请求, 但主机不能访问GuestOS(可...
Oracle VM VirtualBox虚拟机中搭建k8s集群
baidu_38324774的博客
08-23 715
一、安装准备（所有机器） 1、环境准备 机器环境 节点CPU核数必须是 ：>= 2核 ，否则k8s无法启动 内存大于2G 节点之间网络互通 准备3台虚拟机环境 k8s-master01: 此机器用来安装k8s-master的操作环境 k8s-node01: 此机器用来安装k8s node节点的环境 k8s-node02: 此机器用来安装k8s n...
精选资源
VirtualBox下虚拟机的批量复制搭建集群
01-07
1 复制虚拟机 选中一个已经配置好的虚拟机作为模板 选中虚拟机右键 –> 复制 –> 完全复制 设置新的虚拟机名称 2 重新配置静态ip DEVICE=eth0 TYPE=Ethernet ONBOOT=yes BOOTPROTO=static IPADDR=192.168.0.112 # ...
利用VirtualBox虚拟机和kubeadm在本地搭建多节点Kubernetes集群
Gavin
09-23 3630
1. 安装虚拟机 我们需要安装三个虚拟机节点，我们可以先安装其中1个节点，然后利用virtualbox的复制功能，再复制出另外两个节点。 最低环境要求如下： 操作系统： CentOS 7.7 内存：2G CPU：2核 硬盘：20G 1.1 安装VirtualBox 步骤比较简单，忽略 1.2 下载CentOS系统安装镜像 CentOS系统下载地址，截止20190921，两个源信息如下： 华...
基于Virtualbox虚拟机搭建hadoop集群环境
sinat_28881171的博客
05-16 7244
1.1安装centos7在centos官网下载centos7镜像文件，在Virtualbox软件中导入镜像文件进行安装，本次由于实验环境限制，只安装了三台centos7虚拟机，分别命名为hadoop1,hadoop2,hadoop3，为保证三台虚拟机能够正常通信，三台虚拟机的网络连接方式均设置为仅主机（Host-only）适配器模式，每台虚拟机分配内存为2G，存储为8G。在VrtualBox中搭建...
VirtualBox 3台虚拟机安装分布式hdoop 详细步骤 以及相关问题解决
11-30
VirtualBox 3台虚拟机安装分布式hdoop 详细步骤 以及相关问题解决
VirtualBox+Vagrant快速搭建虚拟机集群
小净的博客
01-19 945
文章目录前言一、安装VirtualBox和Vagrant？二、使用步骤1.引入库2.读入数据总结欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 前言 相比VMware，简单便捷。可快速创建
搭建Hadoop集群
m0_73299799的博客
03-14 2466
就像平时给电脑装系统一样，自己需要什么操作系统就去下载什么，这里要安装Ubuntu系统，还是直接bing搜索，找到官方网站。我们这里使用 ubuntu 做为演示。ubuntu一年分为两个版本，4月份的版本比较稳定。下载时可以右键下载复制链接，然后打开迅雷，创建新任务，粘贴链接。迅雷速度还行。
Vagrant + VirtulBox搭建虚拟机集群环境看这一篇就足够了
宜春
09-28 839
感受过VMware的人间冷暖，也体会过VirtulBox的世态炎凉。而我不一样，我待虚拟机如初恋。工欲善其事必先利其器，人生苦短所以我选择上手Vagrant，呸砸男，说好的初恋呢？ 0、环境准备版本 1、双击安装，都是傻瓜式安装。Vagrant安装成功后需要重启电脑。 打开cmd vagrant //执行这个命令，有输出不报错就说明安装OK 2、建议在其他盘中创建文件夹（除C盘），不要有中文，这个文件夹是用来存放虚拟机的。 3、在当前文件夹下打开CMD窗口，具体操作： Shift + 右键
数据仓库搭建1-Virtual-box虚拟机集群搭建
weixin_37544618的博客
01-04 801
virtualbox虚拟机集群搭建
使用VirtualBox搭建分布式集群环境记录
牧修的专栏
10-16 446
针对集群环境，工作中基本上都是直接申请真实的物理机，或者干脆让运维给一套多机。自己之前个人研究的时候也是使用之前从二手市场淘来的多台物理机组成的分布式集群，但是最近一不小心把其中两台搞坏了，加之确实比较占用房间空间，就直接当废铁卖了。目前就剩下了一台4C16G1T的主机。打算使用虚拟机来搭建分布式集群环境。 构想 搭建之前构想了一下环境要求： 1、虚拟机环境能上网 2、虚拟机多机之间能相互访问、网络通畅 3、虚拟机能访问到宿主机 4、宿主机能访问到虚拟机 5、宿主机所在同网段局域网能访问虚拟机
virtualbox虚拟机网络
最新发布
03-18
### VirtualBox 虚拟机网络配置教程 #### 1. 启动虚拟机并安装客户机增强工具 在开始配置网络之前，建议先启动虚拟机，并卸载任何可能存在的旧版 VMware 工具。随后安装 VirtualBox 提供的客户机增强工具以优化性能和兼容性[^1]。 #### 2. 设置主机仅模式 (Host-Only) 网络适配器 进入 VirtualBox 的全局设置界面，在 **管理 -> 主机网络管理器** 中创建一个新的 Host-Only 网络接口。通常情况下，默认分配的 IP 地址为 `192.168.56.1`，子网掩码为 `255.255.255.0`。此操作确保宿主机与虚拟机之间可以通过固定的私有网络通信[^2]。 #### 3. 修改虚拟机内的网络配置文件 对于基于 Linux 的操作系统（如 CentOS 或 Ubuntu），可以使用文本编辑器（例如 `vi`）直接编辑 `/etc/config/network` 文件或其他相关网络配置文件。以下是针对 OpenWrt 系统的一个具体例子： ```bash config interface 'lan' option type 'bridge' option ifname 'eth0' option proto 'static' option ipaddr '192.168.56.11' # 将局域网地址更改为 Host-Only 网段中的可用地址 option netmask '255.255.255.0' option ip6assign '60' ``` 上述配置将虚拟机的 LAN 接口绑定到指定的静态 IP 地址上，从而实现稳定的网络连接[^3]。 #### 4. 手动下载 Docker 镜像用于 Kubernetes 集群部署 如果目标环境涉及容器化技术栈，则可以在 Mac OS 上利用 Vagrant 和 VirtualBox 构建多节点 k8s 集群测试平台。为了加速初始化过程，预先准备两个脚本分别负责 Master 和 Node 组件所需的镜像拉取工作[^4]: - master_images.sh 示例： ```bash #!/bin/bash docker pull registry.k8s.io/kube-proxy:v1.27.0 docker pull registry.k8s.io/pause:3.8 ... ``` - node_images.sh 示例： ```bash #!/bin/bash docker pull registry.k8s.io/coredns/coredns:v1.10.0 docker pull registry.k8s.io/etcd:3.5.7-0 ... ``` 以上命令需根据实际版本号调整。 ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值