
Hadoop
英杰.王
这个作者很懒,什么都没留下…
展开
-
Hadoop2.4来袭
Hadoop的版本更新实在太快啦!!! 最新版本连接: http://hadoop.apache.org/releases.html#07+April%2C+2014%3A+Release+2.4.0+available 安装指导手册: http://www.aboutyun.com/thread-7648-1-1.html ...原创 2014-05-21 09:09:12 · 109 阅读 · 0 评论 -
一张图精通Hadoop的MapReduce
原创 2014-06-28 21:40:09 · 130 阅读 · 0 评论 -
Hadoop2.2.0的伪分布式搭建(可下载PDF附件)
原创 2014-06-28 21:28:41 · 113 阅读 · 0 评论 -
Hadoop学习路线图-转载某论坛文章
原创 2014-06-22 15:36:17 · 118 阅读 · 0 评论 -
如何对Hadoop作业的某个task进行debug单步跟踪 - [转载]
的单步debug跟踪调试无法办到。只能在本地进行调试,然后提交到集群中运行,但是集群中如果某个task总是失败,要对这一个task进行单步跟踪就非常困难。其实原因很简单,因为当把作业提交到hadoop 集群进行运行的时候,你事先根本就不知道那个map或者reduce的task会被分配到哪个tasktracker上执行。所以过去的两年里,写 mapreduce应用的工程师们一直面临着这个悬而未决的问题。只能通过在程序中加日志,并在作业完成或者失败后追踪日志来进行问题定位。无法达到对程序象调试单机程序一样的进行原创 2014-06-12 20:10:00 · 152 阅读 · 0 评论 -
Hadoop-Hive-Hbase-Sqoop相关技术分享
原创 2014-05-23 08:50:08 · 120 阅读 · 0 评论 -
Hadoop2.4来袭
outyun.com/thread-7648-1-1.html原创 2014-05-21 09:09:12 · 86 阅读 · 0 评论 -
Hadoop2.2.0的分布式HA搭建
近期将提供如下图文安装手册,将以PDF格式放到附件中…… 目录 1.简介 2.所需软件 3.集群安装规划 4.安装环境准备 4.1.修改虚拟机IP 4.2.修改主机名 4.3.修改主机名与IP的映射关系 4.4.关闭防火墙 4.5.设置防火墙开机不启动 4.6.配置Windows的IP与主机名的映射 4.7.确保windows和Linux互通 4.8.配置三台节点...原创 2014-06-29 18:04:57 · 152 阅读 · 0 评论 -
一张图精通Hadoop的MapReduce
该图为转载图片原创 2014-06-28 21:40:09 · 149 阅读 · 0 评论 -
Hadoop2.2.0的伪分布式搭建(可下载PDF附件)
目录 1. 简介 2. 所需软件 3. 安装环境配置 4. 安装JDK 5. 安装Hadoop2.2.0 6. 启动Hadoop 7. 验证HDFS是否可用 8. 设置免密码登 1. 简介 本文主要是介绍Hadoop2.2.0的伪分布式的搭建,通过伪分布式的搭建来认识Hadoop2.2.0主要进程,最后实现一个WordCount的单词计数。 2. 所需...原创 2014-06-28 21:28:41 · 247 阅读 · 0 评论 -
Hadoop学习路线图-转载某论坛文章
Hadoop学习路线图 原文:http://bbs.itheima.com/thread-120481-1-1.html Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra...原创 2014-06-22 15:36:17 · 134 阅读 · 0 评论 -
如何对Hadoop作业的某个task进行debug单步跟踪 - [转载]
对于使用Hadoop进行日志分析等工作的开发者来说,相信一直都面临着一个非常头疼的问题。那就是:对hadoop的mapreduce作业,在分布式集群上进行单个task的单步debug跟踪调试无法办到。只能在本地进行调试,然后提交到集群中运行,但是集群中如果某个task总是失败,要对这一个task进行单步跟踪就非常困难。其实原因很简单,因为当把作业提交到hadoop 集群进行运行的时候,你事先根本...原创 2014-06-12 20:10:00 · 204 阅读 · 0 评论 -
Hadoop-Hive-Hbase-Sqoop相关技术分享
http://lvwenwen.iteye.com/blog/1781980 大家好!欢迎大家加入:(141570425)吖大哥QQ技术交流群,在这 你可以将你的Hadoop领域的相关经验分享给大家,该群也会为大家免费分享很多关于Hadoop领域的技术文档、视频、资料及在线技术探讨会,期待你的加入!!! http://yunpan.cn/QipHycMQIwWIS 访...原创 2014-05-23 08:50:08 · 150 阅读 · 0 评论 -
Hadoop2.2.0的分布式HA搭建
原创 2014-06-29 18:04:57 · 121 阅读 · 0 评论