hadoop
关注
分享
扫一扫
放逐的信仰
纸上得来终觉浅，绝知此事要躬行
展开
-
hadoop初始化报错/lib/ld-linux.so.2:bad ELF interpreter: 没有那个文件或目录
Hadoop安装配置过后,Hadoop namenode -format初始化失败,仔细检查配置发现没有问题,后来发现缺少glibc.i686组件解决办法 yum install glibc.i686原创 2016-02-09 16:43:33 · 857 阅读 · 0 评论 -
Hadoop copyToLocalFile报空指针错误
copyToLocalFile(,src,dst)报了空指针使用copyToLocalFile(false,src,dst,true)下载成功原创 2016-02-10 17:21:46 · 2995 阅读 · 1 评论 -
MapReduce 重要组件——Partitioner组件
（1）Partitioner组件可以让Map对Key进行分区，从而可以根据不同的key来分发到不同的reduce中去处理；（2）你可以自定义key的一个分发股则，如数据文件包含不同的省份，而输出的要求是每个省份输出一个文件；（3）提供了一个默认的HashPartitioner。自定义Partitioner：（1）继承抽象类Partitioner，实现自定义的getParti转载 2016-02-13 16:26:34 · 1311 阅读 · 0 评论