- 博客(10)
- 收藏
- 关注
原创 Hadoop完全分布式集群搭建
因为权限的问题,就用 scp -r ./my_env.sh root@hadoop103:/etc/profile.d/把hadoop102机器上的/opt/software目录同步到hadoop103服务器的/opt/software目录下。scp -r ./* 用户名@hadoop102:/opt/module/ ./scp -r ./* 用户名@hadoop103:/opt/module/102与103之间ping 没有问题,后面再说吧!在/home/zj/ 建立一个文件夹bin。
2024-04-17 20:46:11
1660
1
原创 Hadoop样板机搭建操作流程
以管理员身份打开“记事本”,选择:C:\Windows\System32\drivers\etc\host文件。通过几天的整理,将所需的操作指令,操作流程记录下来。今后工作中,有需要就可以打开查看,非常方便!都在xshell于xftp下进行,准备好相关命令,ctrl+c与ctr+v进行。下面的操作就都可以在xshell中进行,用ctrl+c于ctrl+v完成。配置主机名称映射hosts文件,打开/etc/hosts。当然了,Hadoop自己的文件分发命令,也要掌握。先选择镜像文件位置,然后再开始安装!
2024-04-17 14:46:14
1325
原创 自己整理的Hadoop单机版命令与配置文件
工作流程#为了帮助自己更好操作Hadoop 单机环境搭建,整理了相关命令和配置文件,存放在这里,配合xshell,以后就可以ctrl+c与ctrl+v来工作了!!!搭建Hadoop环境所需命令与配置文件汇总前期准备1.安装xshell与xftp,并设置与windows通用的ctrl+与ctrl+V。2.整理安装与配置过程中所用到的命令与配置文件。可以采用ctrl+c与ctrl+v来操作,非常方便。模板虚拟机:内存4G,硬盘50G,安装必要环境,为安装hadoop做准备。
2024-04-16 14:00:03
526
原创 Hadoop环境搭建前期准备工作
作用是将一些常用的网址域名与其对应的IP地址建立一个关联“数据库”,当用户在浏览器中输入一个需要登录的网址时,系统会首先自动从Hosts文件中寻找对应的IP地址。2、在打开的Windows Powershell界面输入notepad,按回车,就会出现记事本的界面;在C:\Windows\System32\drivers\etc找到host文件打开。,在左下角弹框菜单里选择Windows Powershell(管理员)。1.用vi或vim打开文件后,按i键进入编辑,完成后按Esc,按。2.ping网络时,
2024-04-16 06:28:49
421
原创 样板机克隆后安装JDK与Hadoop
记录在这里,就是给自己提个醒,同时xshell和xftp的使用,非常便利与搭建过程中复制、粘贴,让整个过程轻松、自在。(3)source一下/etc/profile文件,让新的环境变量PATH生效。(1)新建/etc/profile.d/my_env.sh文件。(2)打开/etc/profile.d/my_env.sh文件。在my_env.sh文件末尾添加如下内容:(shift+g)(4)让修改后的文件生效(断开重连也可以)克隆后完成两个工作:修改主机名,配置IP地址。(1)获取Hadoop安装路径。
2024-04-15 20:35:39
421
原创 Linux样机安装流程
这里的要点是所有的数据来源于你的数据,就是在安装的时候记录下来的数据。这也是我出现问题的地方,现在想想,就是当时跟着教程走,没有思考!设置一下xshell让它可以用windows的拷贝与粘贴(教程多)。(2)修改module、software文件夹的所有者和所属组均为atguigu用户。(3)查看module、software文件夹的所有者和所属组。虚拟机安装注意事项,给自己写个清单,方便下次照单开始工作。2.在安装过程中,记录网络地址信息。1.在安装前,先设置镜像文件位置。3.安装完成后,开始如下设置。
2024-04-15 17:27:53
1423
原创 虚拟机搭建的心得-NAT网络地址很重要
为了大数据教学的需要,Hadoop环境在windows下也是可以实现的。作为演示是可以用的,但一旦运行程序,还是会出现很多问题。网络配置,一定要按照自己的数据,不要跟着教程,机器不同环境不同,自然不同。很简单就是在安装时,打开网络设置的时候,记录下当时的动态ip范围,和网关的地址。目前的教程很多,也很强大,跟着进行就可以了。但我跟着教程,不知道问题在那里,只是知道是网络配置的。我就是第一次按照教程上的数据设置了,自然就出现了我的问题。写下来,提醒自己以后在安装时候,不要再出现这样小白的问题。
2024-04-15 16:40:01
399
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅