
hadoo
yelena_scr
To be sapiential,courageous,and relaxed!
展开
-
Ubuntu 搭建hadoop集群成功,但MobaXterm无法远程连接集群各个节点
由于我是在VMware上 使用的ubuntu系统,因此解决这个问题需要先了解一下VMware三种网络工作模式:原文请参考 此链接https://www.linuxidc.com/Linux/2016-09/135521.htm我们可以看到有VMnet0(桥接模式)、VMnet1(仅主机模式)、VMnet8(NAT模式)其中:VMnet0表示的是:用于桥接模式下的虚拟交换机;VM...原创 2018-10-26 17:28:13 · 621 阅读 · 0 评论 -
hadoop启动 集群报错: ssh: connect to host slave1 port 22: No route to host
网上有好多好多解决办法,全部试了一遍 检测 防火墙禁用,port22端口是否打开,sshd服务是否开启, 、/etc/hosts 目录下 各个节点IP地址映射 是否正确。都没有错,但最后还是连接不上,猛然划拉到一个百度知道,网都 ping不同,连接什么ssh,,所以赶紧试了一下,!!!果然slave是Ping不通自己的,我的电脑没联网。。。。开了热点之后,可以了。。所以尝试以上方法之前...原创 2018-10-26 17:35:26 · 7996 阅读 · 0 评论 -
hadoop 集群 master无法免密登录slave2
因为这集群是半年前配置好的,现在重新 启动执行一些任务,发现 ssh服务 无法连通,但是slave2是可以 免密登录master 的,考虑到是 公钥和私钥的问题,master想要免密登录slave2,那么 slave2必须 拥有master的公钥,百度了很多教程,但都没有用,最后考虑到是 秘钥更新 的问题,因此 先执行 ll 命令看一下 ~/.ssh目录下的 用户权限有没有 属于系统文件的 ,...原创 2018-10-26 17:43:40 · 1533 阅读 · 0 评论 -
hadoop 解决内存溢出问题 2.1 GB of 2.1 GB virtual memory used. Killing container
hadoop集群启动成功之后,牛刀小试一下自带的jar包里的程序,计算一下pi值:报如下错误:2.1 GB of 2.1 GB virtual memory used. Killing container1.在etc/hadoop/yarn-site.xml文件中,修改检查虚拟内存的属性为false,如下: <property> <name>yar...原创 2018-10-26 17:51:18 · 4927 阅读 · 2 评论