
大数据
文章平均质量分 50
墨渊
爬虫爱好者
遨游在爬虫大军里
展开
-
hadoop配置集群子节少了进程
经常会有这样的事情发生:在主节点上start-all.sh后,子节点有TaskTracker进程,而没有DataNode进程。 环境:1个NameNode 2个DataNode三台机器,Hadoop为1.2.1 解决办法: 1.先停止Hadoop,bin/stop-all.sh 2.三台机器都把hadoop1.2.1/tmp下所有文件删除,rm -rf tmp/* 3.重新格式化DFS bin/hadoop namenode -format 4.再重启bin/start-all.sh 5.查看各节点j原创 2021-10-09 10:37:35 · 498 阅读 · 0 评论 -
大数据基础系列教程
Hadoop 搭建环境: 虚拟机操作系统:CentOS6.6 64 位,单核,1G 内存 JDK:1.7.0_55 64 位 Hadoop:1.1.2 使用 sudo vi /etc/sysconfig/network。 打开配置文件,根据实际情况设置该服务器的机器名,新机器名在重启后生效。 设置 Host 映射文件 设置 IP 地址与机器名的映射,设置信息如下: 配置主机名对应的IP地址 $ sudo vi /etc/hosts 设置:<IP 地址> <主机名> 例如:192.1原创 2021-08-05 20:49:19 · 307 阅读 · 0 评论