hadoop mapreduce 异常笔记

最新推荐文章于 2025-12-04 18:10:19 发布

原创最新推荐文章于 2025-12-04 18:10:19 发布 · 152 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#大数据 #java

hadoop 专栏收录该内容

9 篇文章

订阅专栏

本文记录了一次在使用Hadoop进行MapReduce任务时遇到的InstantiationException异常过程。该异常发生在尝试实例化类时，原因是错误地引用了其他包中的同名类。通过清理错误引入的类解决了这一问题。

------------------------------------------
异常摘要：InstantiationException
异常片段：
java.lang.RuntimeException: java.lang.InstantiationException
at org.apache.hadoop.util.ReflectionUtils.newInstance(ReflectionUtils.java:115)
at org.apache.hadoop.mapred.JobClient$2.run(JobClient.java:886)
at org.apache.hadoop.mapred.JobClient$2.run(JobClient.java:850)
at java.security.AccessController.doPrivileged(Native Method)
at javax.security.auth.Subject.doAs(Subject.java:415)
at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1083)
at org.apache.hadoop.mapred.JobClient.submitJobInternal(JobClient.java:850)
at org.apache.hadoop.mapreduce.Job.submit(Job.java:465)
at org.apache.hadoop.mapreduce.Job.waitForCompletion(Job.java:495)
at cn.liangc.hadoop.nmr.NginxAccessLogMR.main(NginxAccessLogMR.java:173)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)

异常原因：在写任务时，错引了其他包的同名类，清理后问题解决；
------------------------------------------