Hive 远程模式配置

【hive配置metastore远程模式】 hive配置metastore远程模式 阅读详情

远程模式分为客户端与服务端两个部分,服务端的配置与本地模式相同,客户端需要单独配置

这里将centos01节点作为Hive的服务端,centos02节点作为Hive的客户端,在本地模式的基础上继续进行远程模式的配置

客户端配置Hive

在centos01节点中执行以下命令,将Hive安装文件复制到centos02节点:

scp -r /opt/modules/apache-hive-2.3.8-bin/ hadoop@centos02:/opt/modules/

修改centos02节点的hive-site.xml配置文件:

<configuration>
    <!--hive数据库在HDFS中的存放地址-->
  <property>
    <name>hive.metastore.warehouse.dir</name>
    <value>/user/hive/warehouse</value>
  </property>
      <!--是否启用本地服务器连接hive,false为非本地模式,即远程模式-->
  <property>
    <name>hive.metastore.local</name>
    <value>false</value>
  </property>
    <!--hive服务端Metastore Server连接地址,默认监听端口9083-->
  <property>
    <name>hive.metastore.uris</name>
    <value>thrift://192.168.213.128:9083</value>
  </property>

     <!--在hive提示符中包含当前数据库-->
  <property>
    <name>hive.cli.print.current.db</name>
    <value>true</value>
  </property>
     <!--在查询输出中打印列的名称-->
  <property>
    <name>hive.cli.print.header</name>
    <value>true</value>
  </property>
</configuration>

启动Metastore Server

在centos01执行以下命令,启动Metastore Server并使其在后台运行:

hive --service metastore &

此时通过jps命令查看进程,会发现多了一个名为“RunJar”的进程,它就是Metastore Server的独立进程:

在这里插入图片描述

此时再在centos01中启动Hive CLI,则会再次产生一个“RunJar”进程,该进程即为Hive CLI的服务进程:

在这里插入图片描述
在这里插入图片描述

测试Hive远程访问

启动YARN(HA)

start-yarn.sh

在centos01和centos02两个节点中分别启动Hive CLI

在这里插入图片描述
在这里插入图片描述

在centos01中创建表student(默认建在default数据库中)

create table student(id INT,name STRING);

在这里插入图片描述
在这里插入图片描述

由图看出,在Hive客户端中成功查询到了服务端创建的表student,说明Hive远程模式配置成功

Hive部署远程模式 这样的进程单独开启,使用客户端工具或者命令行进行远程连接这样的服务,即远程模式。客户端可以在任何机器上,只要连接到这个server,就可以进行操作。客户端可以不需要密码。将qianfeng01的节点作为服务器节点,将qianfeng02作为客户端节点,将qianfeng01节点中配置好hive远程发送给qianfeng02节点。想要连接metastore服务的客户端必须配置如下属性和属性值。远程模式是一个服务器在在一台节点,客户端在其他节点上。千锋大数据Hadoop全新增强版-先导片。 阅读详情

相关推荐

关于Hive本地模式和远程模式

折腾了几天晚上,终于配置好了hive连接远程mysql,特此感谢@tzhang_skin1@chengat1314@sunev_yu@leonarding的热心帮忙 下面对所遇到的问题和更正的理解做个总结: hive的内嵌模式安装过程参照老虎的ppt就行,基本不会出错,我重点说说对本地模式和远程模式的理解。 (基本概念:metastore包括两部分,服务进程和数据的存储。) 《hadoop

甘道夫的大数据进化论 7229

如何配置远程模式hive

配置远程模式hive的前提需要安装mysql,这里一般不会出问题第一:安装mysql,这里是黑马的安装方法。 第二:安装hive 这个配置也是黑马的,其中许多内容都是用黑马自己的文件路径,所以你需要改一下,问题一般都处在hive-site.xml文件的配置上,自己配置的时候一定要仔细一点第三:初始化元数据由于上面有mysql的开机后台自启动配置,所以在启动hive之前,你唯一要做的就是初始化元数据 这里注意/export/server/需要改为你自己的hive路径,另外这里我一般都地方都是使用e

weixin_55527323的博客 1632

远程模式搭建Hive

远程模式即服务端与客户端在不同的机器上。在之前的博客中已经记录了三台节点搭建的hadoop集群,并在hadoop02上安装了hive,在hadoop03上安装了mysql。这里我们将hadoop01节点作为hive的客户端,hadoop02作为hive的服务端。 要使用远程模式,需要在Hadoop的每个节点上的core-site.xml中添加如下配置: [root@hadoop01 hadoop]# pwd /usr/local/wyh/hadoop-2.7.5/etc/hadoop [root@ha

QYHuiiQ 1469

配置开启Hive远程连接

使用IDEA工具远程连接Hive,首先需要配置开启Hive远程连接支持,主要有2种方式来配置开启Hive远程连接。

积跬步,至千里。 2714

在Linux系统安装配置 MySQL 和 hive,hive配置为远程模式

在Linux系统安装配置 MySQL 和 hive,hive配置为远程模式

2301_76144723的博客 1386

Hive数据库:嵌入、本地、远程全攻略(下)

Hive数据库:嵌入、本地、远程全攻略

Five的博客 1299

Hive-3.1.3远程模式安装与配置

Hive-3.1.3的安装与配置

qq_39652367的博客 3038

arcgis根据矢量范围统计栅格数据众数、最大值、均值、中位数、最小值、少数等

像元统计数据 根据多个栅格数据计算每个像元的统计数据。 可用的统计数据有:众数、最大值、均值、中位数、最小值、少数、范围、标准差、总和及变异度。 https://desktop.arcgis.com/zh-cn/arcmap/10.3/tools/spatial-analyst-toolbox/an-overview-of-the-local-tools.htm ...

GIS哼哈哈的博客 6万+

Hive远程模式配置

(5)修改Hive的配置文件 修改配置文件 hive-env.sh ,由于hive中提供的是 hive-env.sh.template ,需要复制一份。(3)启动Hadoop,Hive会自动监测Hadoop的环境变量,所以在安装hive之前就必须启动Hadoop。由于Centos是最小安装,mysql需要的依赖是没有安装的。(8.1)删除Hive中的guava.jar,并复制Hadoop中的guava.jar到hive中。(6) 启动 MySQL 服务,查看mysqld服务的运行状态并设置开机启动。

ghc364179883ghc的博客 672

电路板功能测试系统-FCT for PCBA

电路板功能测试系统用于电路板组件(PCBA)的功能测试(FCT),满足自动化大批量生产的要求。  ● 用户根据自己需要定义测试步骤,灵活方便  ● 适合工业自动化大批量生产应用  ● 系统测试精度高,稳定可靠   一、电路板功能测试系统概述 电路板测试过程通常由多个步骤组成,每单个步骤中需要对多个物理量(电压、电流、电阻、频率、波形等)进行测试。在每个步骤测试时

6814

Blender地形建模实战:5步搞定Gazebo仿真地形(附避坑指南)

本文提供了一份详细的Blender地形建模实战指南,旨在帮助开发者快速创建Gazebo仿真地形。文章通过五个核心步骤,从环境准备、地形雕刻、模型优化导出,到创建Gazebo模型包及问题排错,系统讲解了如何将Blender中的地形模型成功导入Gazebo进行机器人仿真,并重点分享了关键的避坑经验。

weixin_28475533的博客 345

【入门篇】HIVE的本地模式安装及远程模式配置

本文详细介绍了Hive的本地模式安装及远程模式配置步骤。Hive是一个基于Hadoop的数据仓库工具,能够将SQL语句自动编译为MapReduce任务。本地模式安装包括下载Hive压缩包、配置环境变量、修改配置文件、启动Hadoop集群、检查MySQL状态、创建并配置hive-site.xml文件、上传MySQL驱动包以及初始化元数据。远程模式配置则涉及修改hive-site.xml和core-site.xml文件,配置hiveserver2和metastore服务,并提供了多种启动方式。最后,文章提到可以

2503_91686028的博客 1103

深入解析UE5内存分析:从Memreport到Unreal Insights

本文深入解析了UE5内存分析的两大核心工具:Memreport与Unreal Insights。Memreport提供详细的内存快照,帮助定位UObject等资源的内存占用;而Unreal Insights则能进行实时监控与历史回溯,精准追踪内存泄漏。掌握这两款工具是优化UE5项目性能、确保大型项目稳定运行的必备技能。

lg888的博客 1020

Linux配置hive(远程模式)

hadoop、分布式、hive(远程模式)

m0_53504112的博客 2607

基于线性约束最小方差准则(LCMV)的自适应波束形成算法的matlab仿真

波束形成(BeamForming)通过对多路麦克风(常为多路全向麦)信号进行合并,抑制非目标方向信号,增强目标方向信号;进而能够实现对特定方向的聚焦拾音,能够有效提高接收信号的信噪比,也有起到降噪的作用。基本原理是波的干涉:通过调整不同阵列单元信号之间的参数,使得某些角度的信号增强,而另一些角度的信号相互抵消,例如下图中来自±45°的输入信号未被增强,而在0度方向的输入信号同相位叠加后被增强。为了将窄带波束形成扩展至宽带,可以使用频域LCMV波束形成器。

平时工作较为繁忙,私信消息一般晚上回复,谢谢大家~~ 763

全新YOLO26有效涨点改进专栏目录 | 本专栏持续更新500+篇内容 | 包含各种卷积、主干网络、各种注意力机制、检测头、损失函数、小目标检测改进、二次创新模块、独家创新等几百种创新点改进

🔥《2026年YOLO26改进专栏》🔥 🚀持续更新500+最前沿创新改进点(顶会顶刊论文/独家创新策略),涵盖主干网络、各种卷积、注意力机制、检测头等模块,助力科研论文发表与模型性能提升,支持检测/分割/分类任务。订阅即获完整可运行项目,提供专业QQ答疑群,适合科研发论文(SCI/CCF/核心)及工业应用(PCB/医学/遥感检测)。专栏价格将逐步上涨,早订更优惠! ⭐特色:非计算机专业友好、模块可自由组合、全网独家创新;📌适用:研究生大论文和小论文创新、小目标检测、多领域科研应用,满足不同研究需求。

Ai缝合怪、助力小伙伴高效发论文 5174

Hive远程模式安装配置

Hive是由Facebook贡献给Apache的开源项目,这个工具可以说是完全为DBA而生,它的的目标,是希望能让精通SQL但不熟悉JAVA编程的工程师,在HADOOP的大潮中不至于下岗待业,即使完全不懂JAVA,也能在HD...

cqbh2011的博客 377

mapbox 从入门到精通 - 目录

欢迎大家来到gis分享者的《mapbox 从入门到精通》专栏。博主列出学习大纲,如果有什么问题,欢迎留言。

我哎GIS博客 5851

Hive三种环境搭建(内嵌模式、本地模式、远程模式)以及JDBC的配置以及Java代码

一、文件配置 (以下操作都是在已经有Hadoop、mysql、hive环境,并且配置过hive的情况下配置的) 需要配置的文件有两个 1、{HADOOP_HOME}\etc\hadoop\目录下core-site.xml 文件内容如下: <?xml version="1.0" encoding="UTF-8"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuration> &lt

Leviathan的博客 848

如何借助Gemini 3 Pro完成一篇文献精读?(劝收藏)

金句必须是原文的完整句子,并附上该句子在文中的大致位置。你是一名资深科研文献评估专家,请根据我提供的文献信息(标题、作者、期刊、时间、引用、摘要、结论、图表)依次输出:①影响力评估:按期刊、作者、时间、引用、问题重要性给出1–10分及简述;用上述方法再结合Gemini 3 Pro的辅助,原本需要3小时才能读完一篇文献,现在只需50分钟,不管是顶刊论文还是领域内冷门论文,都可以用这套方法,另外七哥设计的高阶精读提示词,需根据自己的文献内容做调整,希望这篇文章的方法能帮你高效精读文献,掌握文献的精华内容。

智能AI让学术科研更容易 1303

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

部署MYSQL为Hive-2.3.9的元数据存储数据库 配置远程模式

部署MYSQL为HIVE2.3.9的元数据存储数据库

深秋先生的博客 3352

IDEA的使用指南

IDEA基于java的使用手册,可以最快速的上手,在使用中不断的丰富自己的使用技巧.

hive的远程模式安装配置

结束当前客户端进程,发现同级目录下会出现metastore_db目录以及derby.log,将其删除。此时无法直接使用hive命令启动客户端,因为metastore服务没有启动。不能实例化SessionHiveMetaStoreClient。换目录执行需要重新初始化元数据库,生成的库文件不可同步。执行脚本初始化derby数据库。元数据库问题推荐使用MySQL。推荐使用beeline客户端。执行成功后再次启动hive。换一个目录执行hive。

Lydemo的博客 196

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

hive01--hive的安装及配置

在hive内嵌模式与本地模式中,当启动hive cil(hive命令行模式),hive会在后台自动启动hive服务与metastoreserver独立进程。由于执行hiveql时,默认会寻找本地的resourcemanager,因此需要在resourcemanager所在的节点中启动hivecil。

干就完了 3780

Hive-1.2.1远程模式的安装和配置

准备工作 1.搭建好的Hadoop分布式系统 2.apache-hive-1.2.1-bin.tar.gz和mysql-connerctor-java-5.1.43-bin.jar 在mysql数据库上创建hive数据库用于保存hive元数据 #mysql -u root -p >输入密码 mysql>create database hive; 安装 解压apache-

独者looc 1094

博客 8:Hive3.1.2 安装部署教程:远程 metastore 模式(附 MySQL 元数据配置)

Hive 是大数据的数据仓库工具,基于 Hadoop 运行,这篇教你在 node1 节点安装 Hive3.1.2,采用远程 metastore 模式(元数据存储在 MySQL),步骤详细,新手也能快速上手~Hive 安装的核心是 “解决版本冲突 + 配置 MySQL 元数据 + 初始化 + 启动服务”,新手重点关注 guava 包替换、hive-site.xml 配置、元数据初始化这三个关键步骤,连接时优先使用 Beeline 客户端,按照步骤操作,就能顺利搭建 Hive 数据仓库~

2401_87126002的博客 1219

八、Hive3.1.2 安装及其配置(本地模式和远程模式)

文章目录前文hive3.1.2 安装及其配置(本地模式和远程模式)1、下载hive包2、修改其环境变量3、MySQL配置Centos7 MySQL安装步骤:**1、设置MySQL源**2、安装MySQL Community Server3、启动MySQL服务4、查找MySQL root密码5、重置root密码6、MySQL 服务加入开机启动项,并启动mysql进程7、登录MySQL8、配置mysql允许远程访问9、附mysql常用命令:4、将MySQL的JDBC驱动拷贝到Hive的lib目录下5、配置hiv

m0_52426915的博客 6406
上一篇: Hive 本地模式安装
下一篇: Hive 使用 Beeline CLI
philpy_used
博客等级 码龄8年 395粉丝 143原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值