
hadoop
文章平均质量分 83
虚无-缥缈
世界上所有不利因素都是因为当事人的能力不足!
展开
-
centos7安装hadoop3分布式
准备条件:java环境,设置hadoop用户,下载hadoop,若没有配置看前面伪分布教程。 三台虚拟机的IP与名字(名字随便起) 主节点: 192.168.18.135 master 子节点: 192.168.18.139 s1 192.168.18.140 s2 一.修改hostname 及 hosts 修改hostname,对应的IP虚拟机该为对应的名字。 sudo vim /etc/hostname 修改hosts文件,添加映射,类似于DNS解析 sudo vim /etc/hosts 三台原创 2021-09-30 18:15:11 · 219 阅读 · 0 评论 -
centos7安装hadoop伪分布式
一,准备工作 1,创建hadoop用户 useradd -m hadoop -s /bin/bash #创建用户 passwd hadoop #设置密码 为 hadoop 用户增加管理员权限,方便部署,避免一些对新手来说比较棘手的权限问题,执行下面代码添加权限 visudo 找到 root ALL=(ALL) ALL 这行(应该在第98行,可以先按一下键盘上的 ESC 键,然后输入 :100 (按一下冒号,接着输入98,再按回车键),可以直接跳到第100行 ),然后在这行下面增加一行内容:hadoop原创 2021-09-30 18:09:49 · 722 阅读 · 1 评论 -
配置Hadpoop中遇到的问题及解决办法
配置中遇到的问题: 注意:每当修改配置文件后都要删除数据文件(rm -r hadoop/tmp/dfs/*),若不知道路径查看hdfs-site.xml配置文件,下面是我的配置文件的路径 vim /usr/local/hadoop/etc/hadoop/hdfs-site.xml 删除后再重新格式后再启动 1,若遇到 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform… using built原创 2021-09-30 18:05:29 · 405 阅读 · 0 评论