
Hadoop
wide288
头脑的清醒更有利于高级思维的活动。
展开
-
Hadoop之php脚本调用
Hadoop之php脚本调用 原则上,Hadoop是可以支持几乎任何语言的。 原文链接:http://rdc.taobao.com/team/top/tag/hadoop-php-stdin/ 用PHP写hadoop的mapreduce程序 Posted by 覃 健祥 on 03月 28th, 2011 Hadoop本身是Java写的,所以,给hadoop写mapreduc转载 2013-01-26 17:59:49 · 820 阅读 · 0 评论 -
Hadoop框架介绍
Hadoop框架中最核心的设计就是:MapReduce和HDFS。MapReduce的思想是由Google的一篇论文所提及而被广为流传的,简单的一句话解释MapReduce就是“任务的分解与结果的汇总”。HDFS是Hadoop分布式文件系统(Hadoop Distributed File System)的缩写,为分布式计算存储提供了底层支持。 一个分布式系统基础架构,由Apache基金会原创 2013-01-26 17:58:15 · 694 阅读 · 0 评论 -
应该在什么时候使用Hadoop
此文正是我需要的,方案的选型比技术细节的学习更加重要,可能节省的成本更高。 关系到企业的存活。 不同的数据量适用于不同的技术特性,特点。 转自: 作者:chszs,转载需注明。博客主页:http://blog.youkuaiyun.com/chszs 有人问我,“你在大数据和Hadoop方面有多少经验?”我告诉他们,我一直在使用Hadoop,但是我处理的数据集很少有大于几个TB的。转载 2014-03-19 10:11:56 · 1384 阅读 · 0 评论 -
Spark VSHadoop有哪些异同点?
1、 Spark VSHadoop有哪些异同点? Hadoop:分布式批处理计算,强调批处理,常用于数据挖掘、分析 Spark:是一个基于内存计算的开源的集群计算系统,目的是让数据分析更加快速, Spark 是一种与 Hadoop 相似的开源集群计算环境,但是两者之间还存在一些不同之处,这些有用的不同之处使 Spark 在某些工作负载方面表现得更加优越,换句话说,Spark 启用了内存分布转载 2015-02-06 10:51:39 · 1308 阅读 · 0 评论 -
读《Hadoop 权威指南》
部分目录: 1,初始Hadoop 2,关于MapReduce 3,Hadoop分布式文件系统 HDFS 文件系统。 4,Hadoop I/O 5,MapReduce应用开发 6,MapReduce的工作机制 7,MapReduce的类型与格式 8,MapReduce 的特性 9,构建 Hadoop 集群 10,管理 Hadoop 11,Pig简介 Pig Latin 描述原创 2015-02-13 18:57:23 · 978 阅读 · 0 评论