- 博客(4)
- 收藏
- 关注
RSS订阅原创 Hive安装与配置
安装—安装hive之前需要准备好hadoop环境1.下载并解压hive的安装包2.配置环境变量HIVE_HOME,并把$HIVE_HOME/bin添加到PATH中3.如果需要把元数据存储在其他的数据库，则需要安装数据库以下的配置是使用mysql作为存储元数据的数据库环境配置1.把Hive的conf目录中以下文件的文件名去掉.templatehive-log4j.properties...
2019-10-23 22:11:55
236
原创 idea 远程提交Mapreduce的配置
IDEA安装与配置1.安装IDEA2.配置MavenHadoop客户端的配置1.安装jdk，并配置相关环境变量2.把Hadoop集群中的hadoop文件夹复制到本地3.配置环境变量HADOOP_HOMEHADOOP_BINHADOOP_PREFIX并在Path中添加Hadoop的bin目录4.从网上下载对应版本的hadoop.dll和winutils.exe，并复制到Hado...
2019-10-22 21:03:04
326
原创 Hadoop Streaming原理及用法
—Hadoop Streaming允许用户创建和运行非Java语言的Map/Reduce 任务。Streaming的工作原理Streaming的常用操作
2019-10-12 23:58:03
652
原创 Hadoop分布式集群搭建
这里写自定义目录标题虚拟机准备修改IP、DNS、hostname、host文件关闭防火墙建立SSH互信安装JDK安装HadoopHadoop集群启动及检查Hadoop集群关闭虚拟机准备三台虚拟机（1台作为master节点，另外2台作为slave节点），虚拟机系统是centos7.5，并对虚拟机做如下的操作：修改IP、DNS、hostname、host文件使用 vi /etc/sysc...
2019-09-16 15:13:23
436
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人