在NameNode节点上一切正常,并没有提示这个信息,但是在DataNode上出现如下提示信息:
15/01/14 16:42:09 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
经查原来是DataNode子节点上/home/hadoop/hadoop2.2/lib目录下没有native文件夹,而NameNode上面是有这个文件夹的,现在想把这个文件夹从NameNode上复制到所有的DataNode节点上:
在NameNode上进入到lib文件夹,然后使用scp命令进行复制:scp -r native/ root@192.168.137.103:/home/hadoop/hadoop2.2/lib
关于scp命令的一些总结:
从本地拷贝到服务器:
scp sourceFilePath root@192.168.138.151:destination file path
拷贝多个文件:
scp file1 file2 root@200.10.1.2:destination file path
从服务器拷贝到本地:
scp -pr root@192.168.1.101:/home/linux/soft/ /home/linux/others/
拷贝整个目录:
scp -r native/ root@192.168.137.103:/home/hadoop/hadoop2.2/lib
本文介绍了在Hadoop集群中遇到的一个常见问题:DataNode节点未能加载native-hadoop库导致警告信息显示。文章详细记录了解决过程,即通过从NameNode复制缺失的native文件夹到所有DataNode节点来解决这一问题,并提供了具体的scp命令使用方法。
904

被折叠的 条评论
为什么被折叠?



