binma85的专栏

使用hadoop已经有很长时间了，一直沉没在代码里面没有时间整理一下思路。正好准备一个有关hadoop的讲座，顺便系统的介绍一下hadoop，做个备忘。 本文主要从四方面介绍hadoop，分别是简介+历史沿革、基本结构、特点、开源相关。 [b]1.简介+历史沿革[/b] [b]2.基本结构[/b] [b]3.特点[/b] [b]4.开源相关[/b] …… …… ……...

昨天，集群hadoop cluster跑刚刚做好的代码没有问题，而本机调试的时候出现下面的Exception: [code="java"]org.apache.xerces.jaxp.DocumentBuilderFactoryImpl@1a42792:java.lang.UnsupportedOperationException: This parser does ...

hadoop 的mapreduce 的作业在运行过程中常常碰到一些这样的情况：每一个map或者reduce只有30-40秒钟就结束超 大规模的job 时，通常会需要大量的map和reduce的slots 支持，但是job运行起来后，running的map和reduce并没有沾满集群的可用slots当几乎所有的map和 reducers都在调度系统 中运行着，此时却有 一个或者两个pending的...

该博文已迁往： [url=http://www.mannyisbusy.com/mahout-in-action-01/]http://www.mannyisbusy.com/mahout-in-action-01/[/url]

博文迁移至： [url=http://www.mannyisbusy.com/mahout-in-action-02//]http://www.mannyisbusy.com/mahout-in-action-02/[/url]