yuyin86的专栏

目录 [隐藏] 1 利用 Cloudera 部署 Hadoop 1.1 前言1.2 规划 1.2.1 运行模式1.2.2 主机规划1.2.3 Hadoop环境规划 1.3 安装 1.3.1 设置Cloudera的源1.3.2 安装Hadoop 1.4 部署 1.4.1 主机互联 1.4.1.1 主机互联的可选方法（配置复杂并不推荐）

环境：Ubuntu10.10，Hadoop 0.21.0首先准备工作： 1，我是在deskTop版本的Ubuntu下安装的所以，需要先安装ssh server。这个很好找，直接到到新立得里搜索ssh，第一个就是。 2，安装sun jdk6，切忌一定要是java6及其以上版本。先到更新管理器里把canonical的源加进去。     之后sudo apt-get update. 3, sud

Hadoop实施已经有快一个月了，对Hadoop(1.0.3)的概念理解、使用，Linux 与 Shell脚本，甚至对 Mysql 都有了更多的理解。 项目背景：用于互联网信息收集后的关键词匹配与内容提取。 主要系统架构分为互联网爬虫、分析、业务应用三块： 简单架构描述 由于我在当中的角色主要负责分析架构的搭建，所以其他两块都画得简单，下面也不会过多的描述。   Had

英文原文：MapReduce Patterns, Algorithms, and Use Cases，编译：juliashine 在这篇文章里总结了几种网上或者论文中常见的MapReduce模式和算法，并系统化的解释了这些技术的不同之处。所有描述性的文字和代码都使用了标准hadoop的MapReduce模型，包括Mappers, Reduces, Combiners, Partitioner