
hadoop
啊彪123
技术源于思维,思维远比技术重要
展开
-
关于Hadoop的12个事实
原文链接:http://www.searchbi.com.cn/showcontent_62856.htm 事实1:Hadoop是由多个产品组成的。 人们在谈论Hadoop的时候,常常把它当做单一产品来看待,但事实上它由多个不同的产品共同组成。 Russom说:“Hadoop是一系列开源产品的组合,这些产品都是Apache软件基金会的项目。” 一提到Hadoop,人们...原创 2012-08-15 22:44:13 · 100 阅读 · 0 评论 -
ganglia metric 默认监控项
原文地址[url]http://my.oschina.net/vieky/blog/98155[/url]监控项 说明 监控值Load_one One minute load average每分钟的系统平均负载load_one=0.0Load_five Five minute load average每5分钟的系统平均负载load_five=0.0...原创 2014-10-16 13:48:43 · 375 阅读 · 0 评论 -
Hadoop集群,不重启增加机器
有的时候, datanode或者tasktracker crash,或者需要向集群中增加新的机器时又不能重启集群。下面方法也许对你有用。1.把新机器的增加到conf/slaves文件中(datanode或者tasktracker crash则可跳过)2.在新机器上进入hadoop安装目录 $bin/hadoop-daemon.sh start datanode $bin/had...原创 2014-03-12 14:34:55 · 161 阅读 · 0 评论 -
Sqoop的安装与使用
1 导入导出数据库 1)列出mysql数据库中的所有数据库命令 # sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root --password 123456 2)连接mysql并列出数据库中的表命令# sqoop list-tables --connect jd...原创 2014-03-02 20:51:30 · 112 阅读 · 0 评论 -
hadoop--mapreduce代码之多表关联
[code="java"]package com.hadoop.sample;import java.io.IOException;import java.util.Iterator;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache...原创 2012-09-26 15:51:28 · 203 阅读 · 0 评论 -
hadoop--mapreduce代码之单表关联
[code="java"]package com.hadoop.sample;import java.io.IOException;import java.util.Iterator;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache...原创 2012-09-26 15:50:30 · 171 阅读 · 0 评论 -
hadoop--mapreduce代码之排序
[code="java"]package com.hadoop.sample;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org...原创 2012-09-26 15:49:31 · 165 阅读 · 0 评论 -
hadoop--mapredduce代码之数据去重
[code="java"]package com.hadoop.sample;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org...原创 2012-09-26 15:48:37 · 255 阅读 · 0 评论 -
hadoop--mapreduce代码:WordCount
[code="java"]package com.hadoop.sample;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org...原创 2012-09-26 15:47:11 · 184 阅读 · 1 评论 -
mahout安装配置
[url]http://www.cnblogs.com/linjiqin/archive/2013/03/15/2961649.html[/url]mahout安装配置原创 2014-11-04 17:34:47 · 195 阅读 · 0 评论