
大数据
文章平均质量分 78
aruia
这个作者很懒,什么都没留下…
展开
-
设置阿里云开源镜像
访问:http://mirrors.aliyun.com/找到centos,按照步骤来:备份mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup下载新的 CentOS-Base.repo 到 /etc/yum.repos.d/由于我们用的是centos7,所以wget -O...原创 2020-04-12 22:11:58 · 418 阅读 · 0 评论 -
hadoop的安装与配置
不要再选稍后安装操作系统了…’自己定义虚拟机名称与位置然后一直下一步,完成,系统自动安装选择第一个安装CentOS Linux 7安装过程中使用中文安装位置点进去然后点左上角的完成最后点开始安装安装过程中需要设置root密码设置完成密码后等待安装结束,重启虚拟机就成功了设置linux静态ip网络配置的配置文件在/etc/sysconfig/network-sc...原创 2018-10-16 22:17:07 · 195 阅读 · 0 评论 -
Hadoop集群单机版搭建
1.准备Java和hadoop环境都已经配置好2.修改主机名和ip映射vi /etc/hosts 192.168.233.128 zhiyou3.修改配置文件注意:hadoop2.x的配置文件$HADOOP_HOME/etc/hadoop/usr/hadoop/hadoop-2.7.3/etc/hadoop伪分布式需要修改5个配置文件3.1配置hadoop3.1. 第一...原创 2018-10-22 20:00:07 · 338 阅读 · 0 评论 -
Linux上mysql的安装
1.安装mysql客户端1.1.安装wget命令yum -y install wget1.2.下载mysql的repo源wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm1.3 安装mysql-community-release-el7-5.noarch.rpm包rpm -ivh mysql-com...原创 2018-10-22 20:41:29 · 195 阅读 · 0 评论 -
Sqoop简介及安装配置
Sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。sqoop 是 apache 旗下一款“Hadoop 和关系数据库服务器之间传送...原创 2018-10-23 22:07:14 · 443 阅读 · 0 评论 -
Hive的安装及配置
Hive 安装在一台电脑上就行;首先保证hdfs和mysql是正确启动的;在mysql里面建立一个名字叫hive的数据库1.上传解压 /usr/hive2.设置环境变量vi /etc/profileexport HIVE_HOME=/usr/hive/apache-hive-2.3.3-binexport PATH=$PATH:$HIVE_HOME/bin3.刷新环境变量...原创 2018-10-23 22:54:31 · 290 阅读 · 0 评论