Hadoop
文章平均质量分 77
IQuicksandI
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Win下Eclipse提交hadoop法度失足:org.apache.hadoop.security.AccessCon...
在window下应用Eclipse进行hadoop的法度编写,然后Run on hadoop 后,呈现如下错误:11/10/28 16:05:53 INFO mapred.JobClient: Running job: job_201110281103_000311/10/28 16:05:54 INFO mapred.JobClient: map 0% reduce 0%11/10/转载 2012-08-13 15:55:40 · 1204 阅读 · 0 评论 -
hadoop的datanode无法启动
这一周在CentOS里安装了伪分布式的hadoop做测试,但没想到的是按网上的步骤配置后datanode节点怎么也没办法启动。后来通过分析启动日志后发现fs.data.dir参数设置的目录权限必需为755,要不启动datanode节点启动就会因为权限检测错误而自动关闭。提示信息如下:ARN org.apache.hadoop.hdfs.server.datanode.DataNode:原创 2012-08-15 09:19:10 · 1953 阅读 · 0 评论 -
Hadoop 解除 "Name node is in safe mode"
运行hadoop程序时,有时候会报以下错误:org.apache.hadoop.dfs.SafeModeException: Cannot delete/user/hadoop/input. Name node is in safe mode这个错误应该还满常见的吧(至少我运行的时候是这样的)那我们来分析下这个错误,从字面上来理解:Name node is in safe mo转载 2012-08-15 09:25:29 · 1095 阅读 · 0 评论 -
RedHat linux下安装hadoop 0.20.2, 并在windows下远程连接此hadoop,开发调试
1、hadoop 在 redhat linux下的安装过程 网上有很多讲授在windows下通过Cygwin安装hadoop的,笔者认为hadoop原始设计就是在linux下安装使用的,在windows下通过Cygwin安装也无非是模拟linux环境再在这个模拟的环境上装hadoop,既然要学hadoop就真枪实弹的在linux下安装来学习,但是要搞一台真正的linux系统对一般个人转载 2012-08-15 09:27:27 · 1293 阅读 · 0 评论 -
Win下Eclipse提交hadoop程序出错:org.apache.hadoop.security.AccessControlException: Permission denied: user=D
描述:在window下使用Eclipse进行hadoop的程序编写,然后Run on hadoop 后,出现如下错误:11/10/28 16:05:53 INFO mapred.JobClient: Running job: job_201110281103_000311/10/28 16:05:54 INFO mapred.JobClient: map 0% reduce 0%11/转载 2012-08-23 10:38:48 · 3742 阅读 · 0 评论 -
CentOS 安装 hadoop(伪分布模式)
在本机上装的CentOS 5.5 虚拟机, 软件准备:jdk 1.6 U26 hadoop:hadoop-0.20.203.tar.gzssh检查配置 Linux代码 [root@localhost ~]# ssh-keygen -t rsa Generating public/private rsa key pair.转载 2013-01-15 22:31:41 · 1762 阅读 · 0 评论 -
HADOOP JAVA接口
从Hadoop URL 中读取数据package org.urlcat;import java.io.InputStream;import java.net.URL;import org.apache.hadoop.fs.FsUrlStreamHandlerFactory;import org.apache.hadoop.io.IOUtils;public cla原创 2013-02-03 14:31:26 · 3624 阅读 · 0 评论
分享