装完hadoop跑一个算圆周率pi值的示例的时候,先在hadoop的安装位置找到那个传说中的
hadoop-examples-xxxx.jar,xxxx因版本而异
由于安装的hadoop是2.7.0,位置在xxx/share/hadoop/mapreduce/里,xxx为hadoop安装根目录,这个东西也因为和书上的版本不同位置不太一样要自己找。
开四个job算圆周率
hadoop jar hadoop-mapreduce-examples-2.7.0.jar pi 4 1000
得到下面的错误:
java.io.IOException: Cannot create input directory QuasiMonteCarlo_1442130301493_820011182/in
at org.apache.hadoop.examples.QuasiMonteCarlo.estimatePi(QuasiMonteCarlo.java:283)
at org.apache.hadoop.examples.QuasiMonteCarlo.run(QuasiMonteCarlo.java:354)
at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70)
at org.apache.hadoop.examples.QuasiMonteCarlo.main(QuasiMonteCarlo.java:363)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)

在尝试使用Hadoop 2.7.0版本运行自带的pi计算示例时,遇到了无法创建临时文件的错误。该错误可能是由于权限问题导致。通过修改mapreduce目录权限为可写,成功解决了此问题,从而能够正常运行示例任务。
最低0.47元/天 解锁文章
1万+

被折叠的 条评论
为什么被折叠?



