兴趣使然,花了几天的经历下载安装了hadoop集群,安装步骤与坑如下:
1.准备centos6.5,安装
2.设置系统网络环境(坑,玩虚拟机即兼顾固定ip还能共享主机上网,是不可能的,实验了无数回,IP不固定无法配置3台虚拟机集群。)
3.下载JDK——到最后发现自己的jdk1.7下载错了,安装了个client版本的。
4.下载了hadoop2.6.5(大坑,官方网站提供的编译好的就不支持64位系统)。
5.配置hadoop环境变量(网上大家介绍的都对,按步骤做就行了)
6.试着启动Hadoop.(各种坑,血泪啊。鼓捣好2天,native-hadoop一直报worning...)
7.试过了国内外的论坛,大多搜出来的都是2.6.0版本的解决办法。很少有2.6.5的解决办法
8.继续苦寻有效解决方法,最终无果
9.放弃解决。下载hadoop2.6.5-src自行编译,解决native-hadoop问题。
10.安装编译所需各种软件包(坑啊坑啊,软件包有不兼容的,这玩意搞了一天)
11.编译hadoop2.6.5,遇到了各种各样的问题,maven居然不认识注释里的“<>”,
12.最终编译通过。。。采用编译后的native-hadoop,居然无效。
13.采用编译后的的hadoop版本,生效,一切正常。
总结:大家如果需要64位的hadoop2.6.5那么请编译,不过大家可以跟我索取编译好的64位版本。留下邮箱,我发给你。请点赞~!