- 博客(7)
- 收藏
- 关注
RSS订阅原创 Maven编译安装Mahout for Hadoop2
0 准备工作安装Mahout的主机需要安装有JDK、Hadoop执行环境和Maven管理工具。1 编译安装Mahout下载源码：git clone git@github.com:apache/mahout.git进入到mahout根目录，编译：mvn clean compile打包：mvn -DskipTests=true clean package安装
2014-12-12 14:33:56
799
原创 Hadoop2.5.1安装Hive0.13.1
接上一篇文章继续配置。机器列表：127.0.0.1 localhost192.168.11.99 master192.168.11.97 master2192.168.12.174 slave1192.168.12.178 slave2192.168.12.18 slave3192.168.11.94 slave4192.168.12.17
2014-12-02 13:54:40
707
原创 Hadoop2.5.1 ResourceManager HA
Hadoop在2.4以后引入了ResourceManager HA，避免了单点失败。官方文档：ResourceManager High Availability按照之前的安装配置，使用master和master2两台主机作ResourceManager的HA。按照文档说明，我们对yarn-site.xml进行配置： yarn.nodemanager.aux-servic
2014-11-28 16:44:49
811
原创 Hadoop2.5.1安装Hbase + Zookeeper
接上一篇文章继续进行配置。Hbase版本：0.98.7Zookeeper版本：3.4.6机器列表：masterHMastermaster2backup-masterslave1HRegionServerslave2HRegionServerslave3HRegionServerslave
2014-11-27 14:13:28
858
原创 Hadoop2.5.1 HDFS HA(QJM)
HDFS High Availability Using the Quorum Journal Manager机器类型：64位centos。机器列表：192.168.11.99 master192.168.11.97 master2192.168.12.174 slave1192.168.12.178 slave2192.168.12.18 slave31
2014-11-27 09:56:54
694
原创 Hadoop2.5.1完全分布式安装
机器类型，64位centos；列表：58.215.185.92 master58.215.187.209 slave158.215.188.135 slave258.215.187.43 slave358.215.187.77 slave40 准备工作0.1 修改每台机器的hostname为列表中的名字如master就做如下修改：[root@mas
2014-11-26 16:55:02
561
原创 eclipse下编写hive udf函数
package com.tom;import org.apache.hadoop.hive.ql.exec.UDF;import org.apache.hadoop.io.Text;public class HiveUDF extends UDF{ public Text evaluate(final Text str) { if(str == null) return null;
2014-11-20 16:51:20
1055
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人