Hadoop_Hadoop Tips

最新推荐文章于 2024-06-02 17:55:51 发布

原创最新推荐文章于 2024-06-02 17:55:51 发布 · 260 阅读

CC 4.0 BY-SA版权

11 篇文章

订阅专栏

本文详细介绍了在Windows环境下运行MapReduce时可能遇到的问题，包括找不到winutils.exe和hadoop.dll导致的错误，以及相应的解决方案。通过下载并正确配置这些文件，可以有效避免在Windows上运行Hadoop时出现的常见问题。

java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries
解决办法：
下载winutils.exe(http://public-repo-1.hortonworks.com/hdp-win-alpha/winutils.exe)
创建一个目录，比如C:\winutils\bin
将winutils.exe放入上述创建好的目录下
设置HADOOP_HOME=C:\winutils环境变量，并将其放入PATH变量中，例如%HADOOP_HOME%\bin
或者直接在程序中加入System.setProperty(“hadoop.home.dir”, “full path to the folder with winutils”);
java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.createFileWithMode0(Ljava/lang/String;JJJI)Ljava/io/FileDescriptor
解决办法：
下载winutils.exe(http://public-repo-1.hortonworks.com/hdp-win-alpha/winutils.exe)和hadoop.dll(https://github.com/steveloughran/winutils/tree/master/hadoop-2.7.1/bin)
放这两个在%HADOOP_HOME%\bin下，同时hadoop.dll也放在C:\Windows\System32目录下