
JobTracker
文章平均质量分 89
fansy1990
这个作者很懒,什么都没留下…
展开
-
hadoop JobTracker获取启动时间
hadoop1.0.4; 昨天写了一篇blog,是关于获取hadoop集群任务运行信息的例子,仿照50030界面实现。但是昨天遇到一个问题,就是当集群是第一次启动的时候,获得不了JobID,然后就拼凑不了JobID了,这样对后面的程序会有影响,所以想获得集群的第一个JobID,看到这个JobID是由“job_”+JobTracker启动时间+“0001”得到的,所以获得JobTracker的启动原创 2013-12-19 23:45:06 · 3227 阅读 · 0 评论 -
hadoop 启动时间写入文件
hadoop1.0.4; 昨天看了源码,说到可以使用log信息来打印出来JobTracker的启动时间,然后来解析这个Log文件,但是这里有个问题,就是log文件是在hadoop的主节点namenode的linux机器中的,不是在客户端,读取会有一定的问题,然后就又想到了还是写文件(hdfs文件系统)的方式。只要在JobTracker启动之后,然后再写入即可。 还是按源码来说(首先把原来修改的原创 2013-12-20 14:31:36 · 2731 阅读 · 0 评论