- 博客(6)
- 收藏
- 关注
RSS订阅原创 Hadoop集群搭建---step4(Hive、Flume、Azkaban、Sqoop的安装以及环境搭建)
Hadoop集群搭建—step4(Hive、Flume、Azkaban、Sqoop的安装以及环境搭建)软件版本：Hive：hive-1.1.0-cdh5.14.0.tar.gzMysql：mysql-5.1.71-1.el6.x86_64Flume：flume-ng-1.6.0-cdh5.14.0.tar.gzAzkaban：azkaban3.51.0sqoop：sqoop-1.4.6...
2019-07-25 12:23:18
465
原创 CDH版本hadoop重新编译
CDH版本hadoop重新编译前言：在生产环境中，基于Apache Hadoop不便维护，升级，管理等，所以大部分企业采用了CDH Hadoop，但是由于CDH给出的Hadoop的安装包没有提供带C程序访问的接口，我们在使用本地库（本地库可以用来做压缩，以及支持C程序等等）的时候就会出问题。所以需要自己重新进行编译，让其支持本地库。CDH所有软件下载地址：http://archive.clo...
2019-07-18 11:25:30
664
原创 Hadoop集群搭建---step3(hadoop三种架构介绍（standAlone，伪分布，分布式安装以及环境搭建)
Hadoop集群搭建—step3(hadoop三种架构介绍（standAlone，伪分布，分布式安装以及环境搭建)前言：Hadoop有多种版本，流行的版本有Apache Hadoop，CDH Hadoop , HDP Hadoop, MapR Hadoop。每个版本的Hadoop都提供三种集群搭建架构，一种是将Hadoop安装在一台机器下的称之为StandAlone环境；一种是将Hadoop安装...
2019-07-18 11:10:16
452
原创 Hadoop集群搭建---step2(zookeeper的集群环境搭建)
Hadoop集群搭建—step2(zookeeper的集群环境搭建)集群：服务器IP主机名myid的值192.168.52.100node011192.168.52.110node022192.168.52.120node0331.下载zookeeeper的压缩包（版本3.4.9）下载网址：http://archive.apache.org...
2019-07-18 10:54:53
173
原创 Hadoop集群搭建---step1(虚拟机环境准备)
typora-root-url: G:\知识总结\归纳整理Hadoop集群搭建—step1(虚拟机环境准备)#使用iso(centos 6.9)镜像文件进行安装三台机器规划IP地址主机名第一台机器192.168.52.100node01.hadoop.com第一台机器192.168.52.110node02.hadoop.com第一台机器192...
2019-07-18 10:48:15
211
原创 大数据基础
一、大数据基础1.常用linux命令名令效果cd …返回到上一级目录cd -回到上次的目录ls列表形式显示所有文件mkdir -p 路径创建多级目录rm -rf 目录名称强制递归删除文件cp 源文件 目标文件复制，重命名mv 源文件 目标文件剪切tar -czvf 压缩包的的名字 文件或文件夹打包tar ...
2019-07-12 17:35:30
317
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人