oozie 运行遇到的问题

最新推荐文章于 2024-01-07 04:30:00 发布

原创最新推荐文章于 2024-01-07 04:30:00 发布 · 2k 阅读

0 ·

CC 4.0 BY-SA版权

oozie 专栏收录该内容

3 篇文章

订阅专栏

本文分析了在使用Hadoop MapReduce过程中遇到的URISyntaxException错误，该错误通常由于路径配置不正确引起。文章提供了详细的错误信息及可能的原因，并指导如何检查和修正mapred.input.dir和mapred.output.dir的设置。

报错：Failing Oozie Launcher, Main class [org.apache.oozie.action.hadoop.MapReduceMain], main() threw exception, java.net.URISyntaxException: Expected scheme-specific part at index 5: hdfs:
java.lang.IllegalArgumentException: java.net.URISyntaxException: Expected scheme-specific part at index 5: hdfs:
at org.apache.hadoop.fs.Path.initialize(Path.java:206)
at org.apache.hadoop.fs.Path.(Path.java:172)
at org.apache.hadoop.fs.Path.(Path.java:94)
at org.apache.hadoop.fs.Globber.glob(Globber.java:211)
at org.apache.hadoop.fs.FileSystem.globStatus(FileSystem.java:1644)
问题分析：出现这种原因，发现是我们读取mapred.input.dir,或者输出mapred.output.dir时的目录写的有问题，请核实你的目录跟coordinator.xml的是否一致，是否重复输入了hdfs目录。