Charles！-优快云博客

原创 Hadoop伪分布部署

一、在hadoop中执行在/opt/module/hadoop-3.1.3/share/hadoop/mapreduce 目录中执行文件命令：hadoop jar hadoop-mapreduce-examples-3.1.3.jar wordcount /opt/test/input/ /opt/test/output/count.txt 然后查看执行结果切换到存放执行后文件/opt/test/output/count.txt目录中查看执行后的文件二、伪分布部署（1）部署.

2021-12-23 14:15:18 163

原创 Hadoop 环境搭建，创建moba、环境配置

虚拟机连接Moba 一、先打开虚拟机Hadoop100 二、打开MobaXterm 1、New session 创建新的moba 2、红框内打自己虚拟机的IP地址黄框内是自己的管理员用户 root 创建完成之后侧面就会出现自己所创建的IP 3、要在联网的情况下在开启不然就会连接失败 4、连接成功就是下面的形式 jdk、hadoop环境配置一、在opt文件夹下分别创建两个文件夹(software和module) 命令：mk...

2021-12-23 14:12:02 328

原创 ssh 免密配置、修改hadoop配置文件

一、在每个节点生成公钥和私钥，并拷贝 Hadoop100：生成公钥和私钥命令：ssh-keygen -t rsa 这种情况直接敲（三个回车）将公钥拷贝到要免密登录的目标机器上 [root@hadoop100] ssh-copy-id +自己moba名如图所示：注：自己克隆的都需要输入，第一遍需输入密码（是自己虚拟机的密码），配置成功后就可以不需要密码了。没出错就算是成功的（注：我的是已经配置过了的直接就显示了）当你在hadoop100里...

2021-12-23 14:00:29 321

原创问题：vi命令丢失，解决方法

如果vi等命令丢失的同学可以在moba里面找到/etc/下面的profile文件。下载到自己桌面上，并用记事本打开用记事本打开进行编辑找到出错的位置然后再将这个文件再次拖回到原来的文件位置。 source /etc/profile 如果source不能用，就重启服务 ...

2021-12-16 14:27:26 1156

原创修改迅windous网络配置防火墙关闭 ring通体外网

二、修改windows的网络配置在cmd中输入ping 192.168.1.100 如果显示超时 ①虚拟机中的ip不对 ②出现active (running)，虚拟机中防火墙没有关掉三、防火墙的开关 1.防火墙状态的查看 systemctl status firewalld 关闭防火墙 systemctl stop firewalld 开机防火墙不启动 systemctl disable firewalld ...

2021-12-12 15:00:09 503

原创 hadoop环境安装步骤

1.安装VM虚1.安装VM虚拟机安卓centos 2.修改主机名，ip地址，映射 3.修改迅windous网络配置防火墙关闭 ring通体外网 4.连moba 5.jdk.hadoop环境安装配置 6.Hadoop本地，伪分布 7.克隆（完整路径）完全分布 8.群起 9.mysql,hive 安装配置 10.hbase安装配置拟机安卓centos 2.修改主机名，ip地址，映射 3.修改迅windous网络配置防火墙关闭 ring通体外网 4.连moba 5.jdk.had

2021-12-12 14:42:55 1851

原创修改主机名，ip地址，映射

修改ip地址（当前虚拟机的ip地址）命令： vi /etc/sysconfig/network-scripts/ifcfg-ens33 修改为静态获取ip BOOTPROTO=”static” 添加IP地址 IPADDR=192.168.1.100 添加网关 GATEWAY=192.168.1.2 添加子网掩码 NETMASK=255.255.255.0 添加域名解析器 DNS1=192.168.1.2 修改ip地址与主机名的映射命令: vi /etc/hosts 添加对应的ip和..

2021-12-12 14:42:08 3994

m0_64965997的博客