
hadoop
秦景坤
GitHub:https://github.com/Roc-J
展开
-
Hadoop伪分布配置错误总结
Hadoop伪分布配置错误总结小编在进行hadoop学习过程中,在对hadoop的伪分布进行配置时,对两个配置文件进行了修改。一个是core-site.xml和hdfs-site.xml。配置后运行出现了以下错误:17/03/13 04:20:36 ERROR namenode.NameNode: Failed to start namenode.java.lang.IllegalArgument原创 2017-03-13 19:46:49 · 1802 阅读 · 0 评论 -
Ubuntu16.04之Hadoop2.7.3集群安装配置教程
Hadoop集群安装配置教程_Hadoop2.7.3本教程参考了厦门大学数据库实验室,网址:http://dblab.xmu.edu.cn/blog/install-hadoop-cluster/作者:秦景坤时间:2017-4-23环境本教程使用Ubuntu 16.04 64位作为系统环境,基于原生Hadoop2.7.3(stable)版本下验证通过,可适合任何Hadoop2.x.y版本。本教程使用原创 2017-04-24 22:31:40 · 1472 阅读 · 0 评论 -
Ubuntu16.04的Hadoop2.7.3配置Yarn
Hadoop配置-Yarn篇本文参考厦门大学数据库实验室,表示感谢 http://dblab.xmu.edu.cn/blog/install-hadoop/作者:秦景坤时间:2017-4-23YARN是Hadoop2.x中的内容(伪分布式不启动YARN也可以,一般不会影响程序执行)有的读者可能会疑惑,怎么启动Hadoop后,见不到书上所说的JobTracker和TaskTracker,这是因为新版的原创 2017-05-02 19:42:07 · 1119 阅读 · 0 评论 -
Ubuntu16.04的Hadoop2.7.3安装HBase学习
分布式数据库HBase本文有参考厦门大学数据库,表示感谢。 http://dblab.xmu.edu.cn/blog/install-hbase/作者:秦景坤时间:2017-4-28HBase介绍HBase是一个分布式的、面向列的开源数据库,源于Google的一篇论文《BigTable:一个结构化数据的分布式存储系统》。HBase以表的形式存储数据,表有行和列组成,列划分为若干个列族/列族(colu原创 2017-05-02 19:44:24 · 5764 阅读 · 5 评论 -
Ubuntu16.04安装Hadoop2.7.3教程
Ubuntu16.04安装Hadoop2.7.3 教程参考厦门大学数据库实验室 http://dblab.xmu.edu.cn/blog/install-hadoop/,遇到相关的地方有改动。作者:秦景坤日期:2017-4-20主要内部包括 环境配置和本地和伪分布本文档适合于原生Hadoop2,参考相关文档,亲自动手实践来一步一步搭建环境。转载请指明出处。环境本教程使用Ubuntu16.04 64位原创 2017-04-23 20:07:42 · 24527 阅读 · 10 评论 -
Hadoop配置PATH环境变量
Hadoop配置PATH环境变量在这里额外讲一下PATH这个环境变量,通过执行echo $PATH查看上面的教程中都是先进入到/usr/local/hadoop目录中,再执行sbin/hadoop,实际上等同于运行/usr/local/hadoop/sbin/hadoop。可以将hadoop命令的相关目录加入到PATH环境变量中,这样就可以直接通过start-dfs.sh开启Hadoop,也可以直接原创 2017-04-24 22:31:04 · 11093 阅读 · 0 评论 -
Ubuntu16.04的Hadoop2.7.3之分布式文件系统HDFS学习指南
分布式文件系统HDFS学习指南本文参考厦门大学数据库实验室,表示感谢 http://dblab.xmu.edu.cn/blog/290-2/作者:秦景坤时间:2017-4-26Hadoop分布式文件系统(Hadoop Distributed File System ,HDFS)是Hadoop核心组件之一,如果已经安装Hadoop,那么其中就已经包含了HDFS组件,无需另外安装。下面介绍Linux操作原创 2017-04-26 11:51:11 · 2838 阅读 · 0 评论