hadoop
文章平均质量分 57
大数据
AAA821
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
(转)基于Docker搭建Hadoop+Hive
本次使用的各版本配置如下:Docker 19.03.8 JDK 1.8 Hadoop 3.2.0 Hive 3.1.2 mysql 8.0.1 mysql-connector-java-5.1.49.jar hive_jdbc_2.5.15.1040Hadoop部分:一、拉取镜像docker pull registry.cn-hangzhou.aliyuncs.com/hadoop_test/hadoop_base二、运行容器进入容器看worker里面有三台机子,分别是M转载 2021-06-27 21:09:53 · 874 阅读 · 2 评论 -
hadoop的SecondaryNameNode
辅助NameNode管理元数据,从可用性的角度出发,不会跟nameNode部署在同一服务器执行过程:从NameNode上下载元数据信息(fsimage,edits),然后把二者合并,生成新的fsimage,在本地保存,并将其推送到NameNode,替换旧的fsimage....转载 2021-06-14 16:34:12 · 850 阅读 · 0 评论 -
docker安装hadoop集群遇到的一些问题
1.进入hadoop镜像对应的容器内,执行Hdfs命令,显示没找到hdfs: command not found解决方案:在/etc/profile文件内原来是export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin改成export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH...原创 2021-06-14 15:48:46 · 747 阅读 · 0 评论 -
(转)hadoop的datanodes
转自https://blog.youkuaiyun.com/cicada_smile/article/details/109180161转载 2021-06-14 10:50:55 · 389 阅读 · 0 评论 -
(转)Hadoop的nameNode
以下大部分内容转自:https://blog.youkuaiyun.com/weixin_45324890/article/details/108593297和https://www.cnblogs.com/cicada-smile/p/13801180.html转载 2021-06-14 15:40:03 · 539 阅读 · 0 评论 -
用到的Hadoop的命令
1.hadoop namenode -format格式化HDFS2.haddop的start-all.sh命原创 2021-06-14 15:41:13 · 189 阅读 · 0 评论
分享