Hadoop生态圈安装合集
主要用于记录Hadoop的生态圈常用工具的安装和中间遇见的问题解决方案
jacksonary
备忘录
展开
-
HBase和Mahout以及Sqoop和Spark的安装配置记录及问题解决
一、HBase的安装配置 这里主要记录的是HBbase1.2.6版本(主从节点都要配置)的过程,hadoop2.5.1 1.配置 解压后到自己要放的位置后,修改配置文件: 1.修改启动配置文件hbase-site.xml,添加如下内容: property> name>hbase.cluster.distributedname> value>tr原创 2018-01-23 12:20:06 · 555 阅读 · 0 评论 -
Hadoop学习及安装记录
一、 简单Hadoop的介绍 Hadoop的出现是源于Google大数据技术(采用普通PC即可完成一些小型机、大型机甚至是超级计算机完成的大数据处理技术)的模拟,Google的这项技术没有开源,而Hadoop是Apach旗下开源项目,主要用于分布式存储和分布式计算,可以用于搭建大型数据仓库,PB级数据的存储、处理、分析、统计等(搜索引擎、日志分析、数据挖掘、商业智能),在Hadoop中,有两个核原创 2018-01-16 20:19:11 · 441 阅读 · 0 评论 -
Hive安装及问题解决
hoadoop版本2.5.1,hive版本1.2.2,hive只需要在主节点配置即可 在安装好 mysql后,对hive进行解压配置 1.修改配置文件 修改配置文件hive根目录下的conf/hive-site.xml,添加如下内容 configuration> <!--在0.10 0.11或者之后的HIVE版本 hive.metastore.local 属性不再使用,否则会原创 2018-01-22 18:37:25 · 717 阅读 · 0 评论