
hadoop
weixin_40530363
这个作者很懒,什么都没留下…
展开
-
hadoop配置集群常见问题
关于namenode启动后jps没有显示,此时可考虑hadoop namenode -format原创 2018-11-28 16:12:42 · 150 阅读 · 0 评论 -
linux目录文件
/etc:所有的系统管理所需要的配置文件和子目录。 /home:存放普通用户的主目录,在Linux中每个用户都有一个自己的目录,一般该目录 名是以用户的账号命名的。 /mnt:系统提供该目录是为了让用户临时挂载别的文件系统的,我们可以将光驱挂载在 /mnt/上,然后进入该目录就可以查看光驱里的内容了。 /opt:这是给主机额外安装软件所摆放的目录。比如你安装一个ORACLE数据库则就可 以放到这个...转载 2018-11-22 21:02:05 · 113 阅读 · 0 评论 -
mapreduce查找共同好友案列
转载 2018-12-21 21:03:56 · 177 阅读 · 0 评论 -
50070无法访问?
排查Namenode是否部署成功排查Namenode是否部署成功可以采用命令/etc/init.d/hadoop-0.20-namenodestatus或jps两种方式之一查看,如Namenode未部署成功,需重新部署Namenode;若已部署成功,请进行第二步排查! 排查datanode是否部署成功排查datanode是否部署成功可以采用jps命令进行查看,如果部署未成功,找到问题节点进行解决...转载 2019-02-22 11:34:56 · 2548 阅读 · 0 评论 -
常用的hadoop数据序列化类型
原创 2019-02-27 20:31:38 · 864 阅读 · 0 评论 -
hadoop的NullWritable
NullWritable是Writable的一个特殊类,实现方法为空实现,不从数据流中读数据,也不写入数据,只充当占位符,如在MapReduce中,如果你不需要使用键或值,你就可以将键或值声明为NullWritable,NullWritable是一个不可变的单实例类型。 比如,我设置map的输出为<key,空>,这样做 不能使用new NullWritable()来定义,获取空值只能...转载 2019-02-28 10:05:36 · 952 阅读 · 0 评论 -
namenode无法启动
https://blog.youkuaiyun.com/qq_23617681/article/details/51248023转载 2019-03-14 13:09:53 · 381 阅读 · 0 评论 -
namenode无法启动
https://blog.youkuaiyun.com/qq_23617681/article/details/51248023 记住别把data删了转载 2019-03-14 13:47:38 · 150 阅读 · 0 评论 -
hadoop常用命令
0)启动 Hadoop 集群(方便后续的测试) [atguigu@hadoop102 hadoop-2.7.2]$ sbin/start-dfs.sh [atguigu@hadoop103 hadoop-2.7.2]$ sbin/start-yarn.sh (1)-help:输出这个命令参数 [atguigu@hadoop102 hadoop-2.7.2]$ hadoop fs -help rm ...转载 2019-03-14 14:14:00 · 109 阅读 · 0 评论