hadoop源码
文章平均质量分 73
SeoHyunChyL
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Hadoop RPC源码研究----客户端部分
针对之前的升级操作,研究了一下底层源码,主要是hadoop RPC相关的源码。当我们在命令行键入hdfs dfsadmin -rollingUpgrade query的时候,底层所执行的类是DFSAdmin类,可以在 hadoop-2.7.2/bin下的hdfs文件中查看该对应关系。 DFSAdmin中,有关升级操作在内部类RollingUpgradeCommand中。主要方法是定义在run方法中原创 2016-09-22 17:30:04 · 714 阅读 · 0 评论 -
Apache Ranger中Yarn插件使用问题
使用ranger可以控制用户提交作业。在搭建yarn插件之后,建立新的service的时候,填写入‘YARN REST URL ’后,点击test connection,出现了问题,页面弹出框提示无法通过该url获得队列,查看ranger-admin运行日志也没有报错。翻看底层代码后发现,ranger在对yarn的支持上只支持了capacity调度,对fair调度没有支持。 当将运行中的集原创 2017-08-29 15:52:52 · 2471 阅读 · 4 评论
分享