apache_hadoop安装血泪史

本文记录了从零开始安装Hadoop2.6.5的过程,包括CentOS环境搭建、JDK配置、解决native-hadoop警告等问题,并分享了自行编译的经验。

兴趣使然,花了几天的经历下载安装了hadoop集群,安装步骤与坑如下:

1.准备centos6.5,安装

2.设置系统网络环境(坑,玩虚拟机即兼顾固定ip还能共享主机上网,是不可能的,实验了无数回,IP不固定无法配置3台虚拟机集群。)

3.下载JDK——到最后发现自己的jdk1.7下载错了,安装了个client版本的。

4.下载了hadoop2.6.5(大坑,官方网站提供的编译好的就不支持64位系统)。

5.配置hadoop环境变量(网上大家介绍的都对,按步骤做就行了)

6.试着启动Hadoop.(各种坑,血泪啊。鼓捣好2天,native-hadoop一直报worning...)

7.试过了国内外的论坛,大多搜出来的都是2.6.0版本的解决办法。很少有2.6.5的解决办法

8.继续苦寻有效解决方法,最终无果

9.放弃解决。下载hadoop2.6.5-src自行编译,解决native-hadoop问题。

10.安装编译所需各种软件包(坑啊坑啊,软件包有不兼容的,这玩意搞了一天)

11.编译hadoop2.6.5,遇到了各种各样的问题,maven居然不认识注释里的“<>”,

12.最终编译通过。。。采用编译后的native-hadoop,居然无效。

13.采用编译后的的hadoop版本,生效,一切正常。

总结:大家如果需要64位的hadoop2.6.5那么请编译,不过大家可以跟我索取编译好的64位版本。留下邮箱,我发给你。请点赞~!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值