hadoop job.class 源码分析

maixia24

于 2013-11-28 23:03:44 发布

阅读量877

点赞数

CC 4.0 BY-SA版权

分类专栏： Hadoop源码分析

本文链接：https://blog.youkuaiyun.com/maixia24/article/details/17014151

Hadoop源码分析专栏收录该内容

14 篇文章

订阅专栏

此博客介绍了waitForCompletion()方法的工作原理，该方法用于将任务提交到集群并等待其完成。讨论了参数verbose的作用，以及如何通过此方法检查作业是否成功完成。还提到了在与JobTracker通信失败时可能抛出的IOException。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

waitForCompletion()方法里面，提交作业给集群，并且等待作业完成

/**
   * Submit the job to the cluster and wait for it to finish.
   * @param verbose print the progress to the user
   * @return true if the job succeeded
   * @throws IOException thrown if the communication with the 
   *         <code>JobTracker</code> is lost
   */
  public boolean waitForCompletion(boolean verbose
                                   ) throws IOException, InterruptedException,
                                            ClassNotFoundException {
    if (state == JobState.DEFINE) {
      submit();
    }
    if (verbose) {
      jobClient.monitorAndPrintJob(conf, info);
    } else {
      info.waitForCompletion();
    }
    return isSuccessful();
  }