dreaming架构师，充分践行，适当补充理论的一年

window7 U版下装cygwin1.7.7.1   为了玩hadoop，简单的装上ssh，遇到的问题主要在于安装完成后，本地账户命令执行ssh localhost   1 如果不执行keygen,也就是用passwd方式访问，那没有问题（当然记得先net start sshd）; 2 如果执行科keygen用免密码登陆方式访问cygwin的话，再去执行ssh localhost命令的...

  InterfaceAudience 类包含三个注解类型，用来被说明被他们注解的类型的潜在的使用范围（audience）。          @InterfaceAudience.Public： 对所有工程和应用可用          @InterfaceAudience.LimitedPrivate： 仅限于某些特定工程，如Comomn，HDFS等          @Inter...

     MapReduce是hadoop的分布式计算框架，主要包括map与reduce两大阶段：      Map阶段主要负责把数据输入转换成中间键值对结果，它要求输入为键值对方式，具体实现map方法就可以，产生的输出是以可序列化的键值对结果，对键要求可比较即可。而在读入输入数据之前，要求数据已经被逻辑分片。 reduce阶段主要负责把中间结果进一步处理产生最后的输出结果。  ...

  WARN org.apache.hadoop.hdfs.DFSClient: DFSOutputStream ResponseProcessor exception  for block blk_7400268305159146046_1226436java.net.SocketTimeoutException: 66000 millis timeout while waiting for ...