
大数据
bankq
这个作者很懒,什么都没留下…
展开
-
大数据环境搭建系列-JDK安装
概述本篇基于普通用户搭建jdk1.8.0_131环境。1、版本jdk1.8.0_1312、主机192.168.8.21 、192.168.8.22、192.168.8.23 、192.168.8.24、 192.168.8.25五台主机。4、解压tar -zxvf jdk-8u131-linux-x64.gz5、创建软连接ln -s /bigdata/so...原创 2019-04-18 13:07:29 · 332 阅读 · 0 评论 -
大数据环境搭建系列-zookeeper集群搭建
概述本博客基于zookeeper-3.4.9搭建集群环境。非root用户(bigdata),五台机器(cdh01~cdh05)机器主机名 系统 ip cdh01 Linux 192.168.8.21 cdh02 Linux 192.168.8.22 cdh03 Linux 192.168.8.23 cdh04 Li...原创 2019-04-18 13:41:11 · 273 阅读 · 0 评论 -
大数据环境搭建系列-hadoop高可用集群搭建
概述记录一下快速搭建一个高可用的hadoop集群,机器5台(cdh01~cdh05)分配cdh01、cdh02为名称节点,cdh01~cdh05为数据节点部署规划主机名 系统 ip 进程 cdh01 Linux 192.168.8.21 NameNode、ZKFC、Resourcemanager、DataNode、NodeManager、J...原创 2019-04-18 15:53:37 · 327 阅读 · 0 评论 -
大数据环境搭建系列-kafka集群搭建
概述记录自己搭建kafka集群,方便以后快速搭建。机器5台(cdh01~cdh05)1、下载版本:kafka_2.11-0.10.2.1.tgz2、解压tar -zxvf kafka_2.11-0.10.2.1.tgz3、创建软连接或者移动位置ln -s kafka_2.11-0.10.2.1 kafka4、环境变量配置vim ~/.bash_profile...原创 2019-04-18 16:13:28 · 209 阅读 · 0 评论 -
一键安装hadoop完全分布式shell脚本
#!/bin/bash#配置ES的安装目录 修改的地方1 脚本可以自己创建##在windows编写的代码可能运行有问题执行以下 1>vim redisshell.sh 2>:set ff=unixecho -e "请输入hadoop的安装目录,不存在脚本自动创建,最后一个/不要写 /bigdata/install"read esinstallpath#创建ES安装的目录...原创 2019-05-24 15:30:52 · 1723 阅读 · 1 评论 -
shell一键部署zk集群
#!/bin/bash#配置zk的安装目录 修改的地方1 脚本可以自己创建currentTime=$(date '+%Y-%m-%d %H:%M:%S')echo -e "请输入zk的安装目录,不存在脚本自动创建,最后一个/不要写 /bigdata/install"read zkinstallpath#创建zk安装的目录if [ ! -d $zkinstallpath ]; then...原创 2019-05-24 15:52:55 · 264 阅读 · 0 评论 -
shell脚本一键安装kafka集群
shell脚本一键安装kafka集群#!/bin/bash#在脚本的位置存放安装包kafka_2.11-0.10.2.1.tgzcurrentTime=$(date '+%Y-%m-%d %H:%M:%S')echo -e "请输入kafka的安装目录,不存在脚本自动创建,最后一个/不要写 /bigdata/install"read kafkainstallpath#创建KAFKA安...原创 2019-05-24 15:53:37 · 567 阅读 · 0 评论