centOS7 安装hive

Centos7基于Hadoop集群安装配置Hive 1、下载hive 下载地址:http://www.apache.org/dyn/closer.cgi/hive/ 选择对应的版本进行下载 2、安装hive 把下载到本地的apache-hive-2.3.3-bin.tar.gz文件通过WinSCP上传至服务器,并进行解压缩 3、配置环境变量 通过命令"vi /etc/profile",修改配置文件,在文件最后加入路径 ... 阅读详情

1、安装hadoop,参考hadoop伪分布式搭建

https://blog.youkuaiyun.com/starkpan/article/details/85470433

2、下载hive,注意hive版本与hadoop一定要一致

wget http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.0.tar.gz

3、解压到指定目录,随你

tar -zxvf hive-1.1.0-cdh5.7.0.tar.gz -C ~/app/

4、配置系统环境变量

vi /etc/profile
export HIVE_HOME=/home/hadoop/app/hive-1.1.0-cdh5.7.0
export PATH=$HIVE_HOME/bin:$PATH
source /etc/profile

安装完成

5、启动hive

hive

6、常用命令与数据库一致

show databases; 展示数据库
create database helloworld;创建数据库helloworld

7、扩展

以上hive已可以正常使用。hive默认使用的是derby数据库进行元数据保存,但是derby有很多不完善的地方,生产上hive采用mysql进行元数据保存,这里需要对hive进行另一个配置。

配置mysql

(1)进入配置文件目录

/home/hadoop/app/hive-1.1.0-cdh5.7.0/conf

(2)复制配置文件

cp hive-env.sh.template hive-env.sh

(3)配置文件中添加配置

vi hive-env.sh
HADOOP_HOME=/home/hadoop/app/hadoop-2.6.0-cdh5.7.0

(4)添加配置模板

vi hive-site.xml

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<property>
	<name>javax.jdo.option.ConnectionURL</name>
 	<value>jdbc:mysql://localhost:3306/hapark?createDatabaseIfNotExist=true</value>
</property>
   
<property>
	 <name>javax.jdo.option.ConnectionDriverName</name>
     <value>com.mysql.jdbc.Driver</value>
</property>

<property>
 	<name>javax.jdo.option.ConnectionUserName</name>
  	<value>root</value>
</property>
 
<property>
  	<name>javax.jdo.option.ConnectionPassword</name>
    <value>root</value>
</property>
</configuration>

(5)引入mysql驱动包,我虚拟机安装的mysql8,所以导入8的驱动包,这个请根据自己版本配置,版本不对,会连接失败。

cp mysql-connector-java-8.0.11.jar  ~/app/hive-1.1.0-cdh5.7.0/lib/

(6)启动hive,记得要先启动hadoop与mysql

hive

启动完成后,指定服务器将会看到hive自建的许多表。

centos7安装Hive Hive安装 Hive的安装需要Mysql的参与,centos7安装mysql见下一篇文章。 下载Hive 下载地址:http://hive.apache.org/downloads.html 版本:apache-hive-2.3.3-bin.tar.gz 安装Hive 解压压缩文件,目录“/home/hadoop/apps/” tar -zxvf apache-hive-2.3.3-bin.ta... 阅读详情

相关推荐

CentOS7中hive与mysql安装

CentOS中hive与mysql安装一、安装前提二、hive安装三、mysql安装四、安装过程中出现的问题 一、安装前提 已经在本地下载好的hive安装包(hive3.1.2) hadoop银镜安装好了(hadoop3.2.1) jdk已经安装好了(jdk1.8) 二、hive安装 下载路径: http://hive.apache.org/downloads.html 将下载好的 apache-hive-3.1.2-bin.tar.gz上传到虚拟机上 解压 apache-hive-3.1

sugar 1358

java使用JDBC连接hive或impala 含jar包

java使用JDBC工具类连接Hadoop的hive或impala数据库 1.首先要有hive或impala的jar包,注意版本问题。 2.要知道hive或impala的版本,注意hive或impala版本和jar包版本对应,版本不一致导致无法连接。 下面给大家提供impala和hive的jar包 jdbc41_Impala 2.5.43.jar JDBC4连接Impala的jar包 3.开始进入...

Fatelzg的博客 2319

基于centos7安装hive,hadoop版本2.7,hive-2.3.4

安装mysql 1、yum仓库下载MySQL:sudo yum localinstall https://repo.mysql.com//mysql80-community-release-el7-1.noarch.rpm 2、yum安装MySQL:sudo yum install mysql-community-server 3、启动MySQL服务:sudo service mysqld sta...

onlylove777的博客 2095

Hadoop之Hive的安装使用

简介 hive是基于Hadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低,可以通过类似SQL语句实现快速MapReduce统计,使MapReduce变得更加简单,而不必开发专门的MapReduce应用程序。hive是十分适合数据仓库的统计分析和Windows注册表文件 来自:

qq_43222167的博客 727

centos7安装hive和mysql8.0用于HA

环境准备: 1.虚拟机centos7 2.一个健康可用的HA 3.具备基本的知识 4.hive是基于HA完成分布式的,所以在一台机器上完成安装即可 5.正常人 第一步: 安装mysql 1. 官网下载mysql安装包 其中注意centos7 是基于红帽的,Select OS Version: 选择 linux 7 选择 RPM Bundle 点击 Download,我下载的是8.0.26版本 ...

qq_53701272的博客 1944

Hadoop3.1.3 ,hive-3.1.2,flink1.12.0由guava的jar包版本不一致导致的兼容性问题

问题: 在flink1.12.0集成hive3.1.2的过程中,启动./sql-client.sh embedded 报错: Caused by: java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument (ZLjava/lang/String;Ljava/lang/Object;)V. 可以看出是由于guava的jar包版本冲突了。 集成的过程中,我们只在flink/lib下面添加了如下jar包: 经过

科学的N次方 3226

hive和hadoop版本对应关系

hive和hadoop版本对应关系 http://hive.apache.org/downloads.html

web15085599741的博客 1219

基于centos7搭建haoop与hive

centos7搭建hadoop

congge_study的博客 7915

CentOS7 上 Hive安装&配置 超全过程

** CentOS 上 Hive配置 全过程 ** 本文配置所用已有环境:VM下的CentOS 7 两台 甲机&乙机 甲:已安装Hadoop平台 & Java 乙:已安装MySQL 8.0.19 & Java 所用工具 Xshell & Xftp 所有操作不建议在root用户下操作 一丶安装Hive 根目录下创建soft目录 传输 ...

qq_40692666的博客 6288

hadoop2.7+centos7+hive+zookeeper分布式安装

linux上在centos系统中进行hadoop完全分布式集群安装,在hadoop安装完成后的基础之上安装元数据库Mariadb,配置完成后安装hive,zookeeper等。

玉米群体遗传分析实战:如何用IQtree和VCF文件快速构建系统发育树(附避坑指南)

本文详细介绍了如何利用IQtree和VCF文件进行玉米群体遗传分析,并快速构建可靠的系统发育树。文章重点解析了从VCF格式转换到PHYLIP格式的实用技巧,强调了使用ASC模型校正SNP数据偏差的重要性,并提供了完整的参数设置、常见报错解决方案及结果评估指南,帮助研究者高效完成分析并规避常见陷阱。

leaf8的博客 607

Centos7环境下Hive的安装

Hadoop集群(Hadoop搭建集群安装HBase数据库(HBase数据库搭建。

m0_70405779的博客 3838

Agent + 监控平台:自动诊断告警根因

根因分析、智能监控、AI Agent、告警风暴、异常检测、可观测性、故障诊断在现代分布式系统中,快速定位和解决问题是维持系统稳定性的关键。传统的监控系统虽然能够生成大量告警,但往往缺乏对告警根因的自动诊断能力,导致运维团队在告警风暴中难以快速定位问题。本文深入探讨了将AI Agent技术与监控平台结合,实现告警根因自动诊断的技术架构、理论基础和实现方法。我们将从第一性原理出发,分析根因诊断问题的本质,介绍基于Agent的智能监控系统设计,并通过实际案例展示其应用价值。文章同时涵盖了从理论到实践的全链路,包括

AIGC应用创新大全的博客 304

centos7安装部署hive

若有错误,还请指正

weixin_53593452的博客 905

计算机网络Wireshark实验(西安交通大学)

实验名称 计算机网络Wireshark实验 实验日期 2021 年 5 月 17 日 实验地点 XJTU

沉鱼叶的博客 1814

Anylogic试用版密匙

#$%99dTMbLIj+hm/c9fn0suWlfQjdK9FzRH8oSbR Rbm3FEeONkF5mDLKHxhscEDBANDg4BSU2Oi6hErk TH/KzwiCtsM0jfD50uRsj60+gi9ifTlduwcpSr6a GtVSilXwF997xTVAoMLddqOzGQAbnSjBiJOBdm1Z 0QwwIEJynvYgckLfoEADzncIgNnJjYshWcmGh3s9 gTgyuQPlRBeTXfb+ZJPI1JGi4sAUljwdB53Df+AX SEf5FaIbih

qq_43939616的博客 8267

CentOS7集群安装Hive

说明: 1.提前安装好hadoop,参考:CentOS7搭建hadoop集群 2.在node3上安装好Mysql,参考:CentOS7安装Mysql数据库 3.下载hive安装包,本文使用的版本是2.1.0,下载地址 4.准备好mysql驱动包 hive安装在集群的node3机器上 1.上传并解压 1.1新建目录 mkdir -p /develop/software mkdir -p /develop/server 1.2上...

浩瀚蓝天dep的博客 2648

INCA文件刷写全流程:从ES581驱动安装到XCP协议实战(附避坑指南)

本文详细解析INCA文件刷写的全流程操作,从ES581驱动安装到XCP协议配置,提供实战经验与避坑指南。涵盖A2L文件校验、工作区优化、XCP参数调优及自动化刷写技巧,帮助工程师高效完成ECU开发中的文件刷写任务。

egg99的博客 943

VMware 单机安装 Centos 7 +HIVE

推荐系统:windows 10教程所有密码均为123456VMwaere 下载地址:https://www.vmware.com/cn/products/workstation-pro/workstation-pro-evaluation.htmlCentos 7 系统镜像 下载地址:https://mirrors.tuna.tsinghua.edu.cn/centos/7/isos/x86_64/CentOS-7-x86_64-DVD-2009.iso。

neolibo08的专栏 1347

别再手动调参了!用Optuna+PyTorch搞定Transformer时序预测超参数(附完整代码)

本文详细介绍了如何利用Optuna和PyTorch实现Transformer时序预测模型的自动化超参数调优。通过贝叶斯优化技术,显著提升单变量时序预测的效率和准确性,并附有完整代码实现。文章涵盖模型架构设计、数据预处理、Optuna调参实战及生产环境部署建议,为开发者提供一站式解决方案。

weixin_33704234的博客 576

Kimi Code国产AI编程助手安装使用详细教程

Kimi Code 开发者智能编程服务简介:Kimi Code 是专为开发者提供的 AI 编程辅助工具,基于旗舰模型 Kimi K3(2.8万亿参数,支持100万token上下文)。提供 CLI、VS Code 插件等形式,支持代码阅读、编辑等功能。用户可通过API Key接入第三方工具。安装简单(Windows/Mac/Linux一键脚本),需在官网生成API密钥并登录使用。注意账户需充值余额方可正常调用服务。

猿小白的博客 2057

Linux(CentOS7)安装Hive

一、准备安装包 apache-hive-1.0.0-bin.tar.gz mysql-connector-java-5.1.40-bin.jar 可以到我的网盘下载:链接: https://pan.baidu.com/s/1pL0_0PMKtqH-iMznP1pdCw 提取码: sj5n 二、安装mysql 这里不再赘述,如果未安装,可以参考下面两篇博文: CentOS7 yum方式 安装My...

Java进阶之路 1548

Python 爬虫实战:爬取股票数据做 K 线图可视化

摘要:本文介绍基于Python的股票数据爬取与K线图可视化全流程技术方案。通过Requests库抓取东方财富网股票数据,使用Pandas进行清洗处理,并利用mplfinance库实现专业K线图绘制。文章详细讲解了数据爬取接口分析、反爬策略配置、K线图绘制方法(包含基础K线图和带均线的进阶版本),以及核心统计指标计算。该方案可应用于股票价格趋势分析,为投资决策提供数据支持,同时强调了数据使用的合规性和技术优化方向。

2503_91057718的博客 2045

centos7 hive mysql_Centos7安装Hive mysql

第十单元 完全分布式、Hive2、HiveHive是数据仓库:zhangsan math 99lisi math 88wangwu math 78zhangsan english 69lisi english 87wangwu english 791、数据文件2、对数据文件的表、字段等描述信息(元数据信息,默认使用derby存放元数据信息,建议使用Mysql存放元数据信息)select avg(成...

weixin_35272691的博客 260

IDEA的使用指南

IDEA基于java的使用手册,可以最快速的上手,在使用中不断的丰富自己的使用技巧.

lwip-2.0.3

lwip是瑞典计算机科学院(SICS)的Adam Dunkels 开发的一个小型开源的TCP/IP协议栈。实现的重点是在保持TCP协议主要功能的基础上减少对RAM 的占用。

Centos7下Hive安装与配置

目录Centos7下Hadoop完全分布式集群Hive安装第一步:安装软件(1)上传文件(2)解压文件第二步:配置环境变量第三步:修改配置文件(1)修改文件名称(2)配置hive-env.sh文件(3)在HDFS上创建Hive的目录第四步:启动测试第五步:Hive与MySQL集成(1)配置hive-site.xml文件(2)设置用户的链接(3)拷贝驱动包到hive的lib目录下(4)启动测试 Centos7下Hadoop完全分布式集群Hive安装 电脑系统:macOS 10.15.4 虚拟机软件:Para

蔡政洁的博客 2698

Statistics and Machine Learning Toolbox

Statistics and Machine Learning Toolbox(带书签),MATLAB统计学习工具

01 在CentOS7中安装Hive

hive是能够使mapreduce过程简化的数据仓库,提供了众多的常用算子。hive的安装部署有三种:默认[使用自带deby数据库]、本地[使用mysql数据库]和远程[metastore和mysql不在同一个机子]。本文将阐述hive在CentOS7中的默认安装。 1 系统、软件以及前提约束 CentOS 7 64 工作站 作者的机子ip是192.168.100.200,主机名...

张力的程序园 202

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

上一篇: linux centos7 从零搭建Hadoop+zookeeper高可用集群(六台虚拟机)详细
下一篇: cenos7 常见错误 Failed to set locale, defaulting to C
starkpan
博客等级 码龄11年 22粉丝 51原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值