问题简介:
搭建hadoop集群环境的过程中,主节点没问题。dataNode和TaskTracker老是启动不起来。
具体现象:
1 start.sh后dataNode节点出core
2 日志文件说明 libhadoop.so 没有 an unkown value
3 排查各种配置。
4 最后通过网上查询和跟同事沟通,定位到本地库的编译问题。
处理步骤:
1 反复检查配置文件。徒劳无货。
2 下载ant重新编译。
3 ant编译需要外网环境,配置外网环境。
4 默认ant之后,没有libhadoop.so
5 怀疑是否是编译问题。
6 跟同事沟通,确认编译问题无疑
7 网上搜索,需要ant native-complie
8 发现libhadoop文件,重新部署。
9 成功运行