Linux上安装hadoop和hive

一．下载安装包

1.Hadoop包

http://archive.apache.org/dist/hadoop/common/hadoop-2.6.5/

2.Hive包

https://mirrors.bfsu.edu.cn/apache/hive/hive-2.3.9/

3.Hive的MySQL驱动

https://dev.mysql.com/downloads/file/?id=476197

4.安装java

安装java:yum install java-1.8.0-openjdk.x86_64
配置java_home环境变量

二．安装Hadoop

1.解压包hadoop-2.6.5.tar.gz

命令：tar zxvf hadoop-2.6.5.tar.gz

2.剪切至/usr/local目录下

命令：mv hadoop-2.6.5 /usr/local/hadoop

3.配置文件

需要配置的文件如下：core-site.xml，hdfs-site.xml，所有的文件均位于/usr/local/hadoop/etc/hadoop下面，具体需要的配置如下：

3.1. 配置core-site.xml

<configuration>
	<property>
		<name>hadoop.tmp.dir</name>
		<value>file:/home/hadoop/hadoop/tmp</value>
	</property>
	<property>
	<name>fs.defaultFS</name>
		<value>hdfs://localhost:9000</value>
	</property>
</configuration>

其中的hadoop.tmp.dir的路径可以根据自己的习惯进行设置。

3.2. 配置hdfs-site.xml

<configuration>
	<property>
		<name>dfs.replication</name>
		<value>1</value>
	</property>
	<property>
		<name>dfs.namenode.name.dir</name>
		<value>file:/home/hadoop/hadoop/tmp/dfs/name