遇到问题归总
**
**
一、Java I/O报错,window上没有处理hadoop的工具包。
**
**
java.io.IOException: Could not locate executable null\bin\winutils.exe in the Hadoop binaries. spark Eclipse on windows 7
由错误可得主要是程序在运行过程中去查看环境变量时,由于HADOOP_HOME在window上没有配置,所以取值为null,导致路径出问题。
解决方法:
- 下载winutils
- 随便建立一个文件目录,这里我是
F:\hadoop-winutil\bin
将下载的winutil.exe放入目录,建立系统对这个目录的索引,这里有两种方式
方法一:在系统中设置环境变量HADOOP_HOME=F:\hadoop-winutil\bin;
具体过程不在赘述,不清楚请百度。重启电脑后,问题解决。方法二:在程序开头加入
System.setProperty("hadoop.home.dir", "F:\\hadoop-winutil");