
hadoop
gnail_oug
这个作者很懒,什么都没留下…
展开
-
Permission denied: user=Administrator, access=WRITE, inode="hadoop":hadoop:supergroup:rwxr-xr-x
window下eclipse远程连接Hadoop,运行wordcount程序报如下错误:Caused by: org.apache.hadoop.ipc.RemoteException: org.apache.hadoop.security.AccessControlException: Permission denied: user=Administrator, access=WRITE,转载 2015-07-19 21:17:24 · 3919 阅读 · 3 评论 -
hadoop1.2.1报Warning: $HADOOP_HOME is deprecated. 的解决方法
启动/停止Hadoop时报了一个警告信息,安装的Hadoop版本是hadoop1.2.1,如下图: 原因是Hadoop本身对HADOOP_HOME做了判断,具体在bin/hadoop和bin/hadoop-config.sh里。在hadoop-config.sh里有如下的配置:if [ "$HADOOP_HOME_WARN_SUPPRESS" = "" ] && [ "$HADOO转载 2015-07-16 09:39:59 · 947 阅读 · 0 评论 -
测试hadoop-1.2.1是否成功安装和配置
本文说明hadoop安装之后验证安装和配置的方法,hadoop-1.2.1安装方法参考:hadoop-1.2.1安装方法详解hadoop安装成功之后,要简单验证是否成功安装和配置,在hadoop-1.2.1安装方法详解教程中,已经通过jps命令简单的验证,这里通过执行MapReduce作业统计单词来进一步验证reduce的配置是否正确,下面是验证方法:1、为方便运行hadoop命令原创 2015-07-19 20:38:41 · 5291 阅读 · 0 评论 -
hadoop-1.2.1安装方法详解
一、环境准备1、安装VMware软件,然后在VMware里安装三台Linux虚拟机(我使用的是redhat)2、设置虚拟机主机名ip内存硬盘master192.168.10.200500M8Gslave1192.168.10.20150原创 2015-07-19 20:31:40 · 3683 阅读 · 0 评论 -
Hadoop的第一个程序 wordcount
Hadoop的第一个程序 wordcountpackage com.songguoliang.hadoop.chapter05;import java.io.IOException;import java.util.StringTokenizer;import org.apache.hadoop.conf.Configuration;import org.apache原创 2015-07-19 21:10:50 · 1150 阅读 · 0 评论 -
hadoop-1.2.1添加节点的方法
本帖介绍如何在已存在的集群环境增加节点,增加节点的大部分步骤都和安装步骤一样,在看本教程时需要结合hadoop-1.2.1安装方法详解一起进行,否则不易弄明白,hadoop-1.2.1集群安装方法参考 hadoop-1.2.1安装方法详解添加节点的步骤如下:1、安装VMware软件,然后在VMware里安装三台Linux虚拟机(我使用的是redhat)2、设置虚拟机原创 2015-07-20 09:38:33 · 1121 阅读 · 0 评论 -
hadoop-2.2.0安装方法详解
hadoop有三种安装模式: 单机模式:安装简单,几乎不用作任何配置,但仅限于调试用途 伪分布模式:在单节点上同时启动namenode、datanode、ResourceManager、NodeManager、secondary namenode等5个进程,模拟分布式运行的各个节点 完全分布式模式:正常的Hadoop集群,由多个各司其职的原创 2015-07-21 10:13:44 · 1388 阅读 · 0 评论