
hadoop
文章平均质量分 77
益州牧
这个作者很懒,什么都没留下…
展开
-
eclipse下开发mapreduce程序设置reduce个数无效的问题及解决
reduce个数是可以根据集群和项目具体情况设置的,新接口中用job.setNumReduceTasks(n);即可设置,但前几天用eclipse调试mapreduce程序时发现无论设置reduce个数是多少,运行时仍然只有一个reduce,输出目录里也只有一个输出文件part-r-00000。 看运行日志中启动的是LocalJobRunner, 网上查询得知hadoop有本地、伪分布、完全分布原创 2015-02-03 00:08:15 · 1802 阅读 · 0 评论 -
用虚拟机安装、启动、停用hadoop2.6.0(实现hdfsHA和ResourceManagerHA)步骤小记
用虚拟机安装、启动、停用hadoop2.6.0(实现hdfsHA和ResourceManagerHA)步骤小记原创 2015-07-01 23:11:30 · 809 阅读 · 0 评论