hive启动远程模式命令即注意事项

Hive部署远程模式 这样的进程单独开启,使用客户端工具或者命令行进行远程连接这样的服务,即远程模式。客户端可以在任何机器上,只要连接到这个server,就可以进行操作。客户端可以不需要密码。将qianfeng01的节点作为服务器节点,将qianfeng02作为客户端节点,将qianfeng01节点中配置好hive远程发送给qianfeng02节点。想要连接metastore服务的客户端必须配置如下属性和属性值。远程模式是一个服务器在在一台节点,客户端在其他节点上。千锋大数据Hadoop全新增强版-先导片。 阅读详情

在启动hive前,一定在保证集群的mysql和Hadoop是启动成功的,

Hadoop是存储实质数据==
mysql是存储hive的元数据(映射关系数据)

Hadoop的启动命令:start-all.sh Hadoop
进程名:NameNode、DataNode
hadoop的关闭命令:stop-all.sh

[root@node01 ~]# start-all.sh 
This script is Deprecated. Instead use start-dfs.sh and start-yarn.sh
Starting namenodes on [node01]
node01: starting namenode, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/hadoop-root-namenode-node01.out
node01: starting datanode, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/hadoop-root-datanode-node01.out
node02: starting datanode, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/hadoop-root-datanode-node02.out
node03: starting datanode, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/hadoop-root-datanode-node03.out
Starting secondary namenodes [node02]
node02: starting secondarynamenode, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/hadoop-root-secondarynamenode-node02.out
starting yarn daemons
starting resourcemanager, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/yarn-root-resourcemanager-node01.out
node01: starting nodemanager, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/yarn-root-nodemanager-node01.out
node02: starting nodemanager, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/yarn-root-nodemanager-node02.out
node03: starting nodemanager, logging to /export/servers/hadoop-2.6.0-cdh5.14.0/logs/yarn-root-nodemanager-node03.out
[root@node01 ~]# jps
19504 DataNode
12002 RunJar
20085 Jps
19365 NameNode
9448 QuorumPeerMain
19865 NodeManager
11817 RunJar
2169 -- process information unavailable
19758 ResourceManager

在hadoop启动集群成功后,HDFS会进入安全模式,等安全模式结束后再开始启动hive

**

注意hdfs在安全模式下:对数据只有查看的权限,

没有删除,上传,创建的权限

Mysql的启动命令:mysql -u mysql_name(你的mysql的用户名) -p
按下回车执行后在输入你mysql的password

在这里插入图片描述

**

登录hadoop的web端查看是否退出安全模式,
Hadoop的web端口号为:50070**

在这里插入图片描述

此次启动的是hive远程模式 ,
第一代客户端:后台挂起启动
nohup /export/servers/hive/bin/hive --service metastore &
nohup /export/servers/hive/bin/hive --service hiveserver2 &

客户端在那就执行这个启动代码:/export/servers/hive/bin/beeline

! connect jdbc:hive2://node01:10000
…username…:mysql_name
…password…: 可以不用输入,直接按回车即可

[root@node02 ~]# /export/servers/hive/bin/beeline 
SLF4J: Class path contains multiple SLF4J bindings.
SLF4J: Found binding in [jar:file:/export/servers/hbase/lib/slf4j-log4j12-1.7.5.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: Found binding in [jar:file:/export/servers/hadoop-2.6.0-cdh5.14.0/share/hadoop/common/lib/slf4j-log4j12-1.7.5.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: See http://www.slf4j.org/codes.html#multiple_bindings for an explanation.
SLF4J: Actual binding is of type [org.slf4j.impl.Log4jLoggerFactory]
Beeline version 1.1.0-cdh5.14.0 by Apache Hive
beeline> ! connect jdbc:hive2://node01:10000
scan complete in 2ms
Connecting to jdbc:hive2://node01:10000
Enter username for jdbc:hive2://node01:10000: root
Enter password for jdbc:hive2://node01:10000: 
Connected to: Apache Hive (version 1.1.0-cdh5.14.0)
Driver: Hive JDBC (version 1.1.0-cdh5.14.0)
Transaction isolation: TRANSACTION_REPEATABLE_READ
0: jdbc:hive2://node01:10000> 

启动成功,可以直接操作业务了

Hive系列 (一):Hive搭建 CentOS中安装hive,hiveserver2, beeline配置 阅读详情

相关推荐

Hive的安装模式

内嵌模式的简介 使用hive自带默认元数据库derby来进行存储,通常用于测试 1. 优点:使用简单,不用进行配置 2. 缺点:只支持单session。 安装步骤: 1)解压hive并配置环境变量 local]# tar -zxvf apache-hive-2.1.1-bin.tar.gz -C /usr/local #修改hive安装路径名,方便以后使用 local]# mv apache-hive-2.1.1-bin/ hive local]# vi /etc/profile # 添加如下内

hangoer的博客 342

hive之远程模式环境搭建

hive之远程模式1.解压与安装2.配置环境变量3.拷mysql驱动到lib下4.在conf目录下新建一个hive-site.xml5.修改hive-env.sh文件6.初始化元数据库7.mysql授权8.启动 1.解压与安装 sudo chmod 777 apache-hive-3.1.2-bin.tar.gz sudo tar -zxvf apache-hive-3.1.2-bin.tar.gz -C /home/hdfs/software <!-- 修改名字为hive-3.1.2,并建立软链接

shyming's blog 1036

Hive集群环境搭建之本地模式(MySQL)

文章目录搭建集群的模式有三种1. 源码包下载及解压2. 集群的环境3. MySQL服务端的设置3.1 安装Mysql服务端3.2 开启服务3.3 进入MySQL修改权限3.4 需要将mysql的jar包拷贝到$HIVE_HOME/lib目录下4. 修改hive-site.xml文件5. 启动Hive6. 注意的地方 搭建集群的模式有三种 本地模式(derby) 本地模式(mysql) 多用户模式...

qq_39131779的博客 774

安装部署Hive(远程模式部署)

前要和介绍: 首先确保我们环境上的hadoop部署成功并启动,使用命令启动hadoop 安装hive的远程模式:我们使用三台机器,分别为master,slave1,slave2。slave2存放元数据,slave1作为hive server作为thrift服务器,master作为client客户端进行操作。 安装部署Hive slave2上安装MYSQL Server Mysql安装 Mysql安装配置 创建工作路径,解压安装包 操作流程: 首先创建工作路径,并将hive解压。环境中master作为客

wenqi 3459

Hive部署本地模式

使用mysql替换derby进行元数据的存储,hive的相关进程都是在同一台机器上,即本地模式。mysql因为是独立的进程,所以mysql可以和hive在同一机器上,也可以在其他机器上。注意:在hive-site.xml的第3215行有一个特殊的字符,由于编码,执行程序时不识别,需要手动修改(删除就可以了)通常使用关系型数据库来进行元数据存储(mysql、oracle等执行带jdbc驱动的数据库)注意:hive的元数据在mysql库里创建的数据库hive的编码最好设置成latin1。启动MySQL的服务。

千锋教育 895

hive知识大全

       Hive 的产生  Hive 产生的原因:方便非java 编程者(熟悉 SQL 语言)对 hdfs 的数据做 mapreduce操作。 Hive 是数据仓库 数据库:用户与数据库交互,提交 SQL 语句后,马上见到执行结果;存放业务数据;数据库提出范式的概念是为了解决数据冗余和耦合的问题;数据库给业务数据提供存储支撑。数据仓库:不与用户交互;存放历史数据;反范式设计,专门引入冗余数据...

paulfrank_zhang的博客 3464

hive mysql远程模式_Hive远程模式启动

1、配置远程服务器MYSQL,并保证远程可以访问2、$HIVE_HOME/conf/hive-site.xml 关键配置如下hive.metastore.localfalsecontrols whether to connect to remove metastore server or open a new metastore server in Hive Client JVMjavax.jdo...

weixin_39899021的博客 230

hive独立模式环境搭建

环境centos7 (1)安装mysql,这里安装的是mariadb (2)下载mysql驱动,并且把相关文件放到/home/xie/bigdata/apache-hive-2.1.0-bin/lib目录下。 注意:这里下载的是 我们要放到那个目录的文件是这个文件里面的 如果驱动没放到相应的目录,则会报下面的错误: (3)创建mysql用户,创建相应的元数据库 cre

u011011025的专栏 979

如何配置远程模式hive

配置远程模式hive的前提需要安装mysql,这里一般不会出问题第一:安装mysql,这里是黑马的安装方法。 第二:安装hive 这个配置也是黑马的,其中许多内容都是用黑马自己的文件路径,所以你需要改一下,问题一般都处在hive-site.xml文件的配置上,自己配置的时候一定要仔细一点第三:初始化元数据由于上面有mysql的开机后台自启动配置,所以在启动hive之前,你唯一要做的就是初始化元数据 这里注意/export/server/需要改为你自己的hive路径,另外这里我一般都地方都是使用e

weixin_55527323的博客 1631

Hive框架的搭建和使用_第一节_hive的搭建和启动命令等

Hive框架的搭建和使用_第一节_hive的搭建和启动命令等hive 安装包+ mysql-binHive 的搭建一。先安装mysql二。安装hive 配置环境,3. 多用户模式 我们用的是server client分开下面那个1.Remote一体2.Remote分开1.本地模式(derby)2.单用户模式(mysql) hive 安装包+ mysql-bin https://github.com/1367379258/BigDataED/tree/master/hive/tool Hive 的搭建 Hi

无尽_easy的博客 371

不用公网IP!用Ollama+Chatbox搭建家庭AI助手(内网穿透方案对比)

本文详细介绍了如何利用Ollama和Chatbox在家庭局域网中搭建本地AI助手,无需公网IP即可实现内网穿透。通过对比不同穿透方案(如Tailscale、FRP等),提供最优配置建议,帮助用户低成本部署隐私安全的家庭AI系统,适用于智能家居、儿童教育等多种场景。

weixin_26765287的博客 460

Hive搭建

文章目录环境1. Hive三种搭建方式2. Hive下载3. 本地单用户模式(derby)4. 本地多用户模式(mysql)5. 多用户模式5.1 Remote一体5.2 Remote分离 环境 JDK1.8 + Hadoop2.6.5 HA + Hive 1.2.1 1. Hive三种搭建方式 Hive中metastore的三种方式: 内嵌Derby方式 使用内嵌的默认元数据数据库Derby,单进程访问 Local方式 使用其他的关系型数据库,该关系型数据库和hive在同一个节点 Remote方式 使用

sinat_35400668的博客 392

Linux音频调试实战:ALSA架构与tinymix工具的高级应用技巧

本文深入探讨了Linux音频调试的核心技术,重点解析了ALSA架构下音频信号的路由与混合机制。通过介绍轻量级命令行工具tinymix的高级应用技巧,指导开发者如何精准排查无声、音量异常、多路音频共存等复杂问题,并分享编写自动化测试脚本以提升嵌入式及智能设备音频开发效率的实战方法。

weixin_29210727的博客 101

【Hive】Hive开启远程连接及访问方法

本文关键字:Hive、远程连接、MetaStore、JDBC、SparkSQL。在进行开发时,我们通常需要能够在代码中访问Hive进行查询,此时我们要做一些配置和修改。第一种方式是直接开启一个hiveserver2的Hive服务端,用来提供执行 SQL 查询和获取结果的接口。第二种模式是直接开启一个Metastore服务,以网络模式/远程模式来为访问提供支持。两种模式都有各自的使用场景,在多节点的生产环境中多采用网络模式【有利于保证数据的一致性】,开发测试环境中多采用伪分布模式,因此嵌入模式通常足够。

微光点亮星辰 4270

STM32入门教程:车牌识别

在本文中,我们介绍了如何使用STM32实现车牌识别功能,并提供了详细的代码案例。通过以上步骤,你可以开始开发自己的车牌识别系统了。希望本文对你有所帮助!

2401_85258012的博客 874

用 ADT 的 RAP Generator 把 RAP 栈一键搭起来:从表到可预览的 OData V4 应用

摘要 SAP RAP Generator 工具能显著提升开发效率,通过一键生成从数据库表到完整 OData UI Service 的全套对象(包括 CDS、Behavior、Service Definition 等)。该工具特别适用于原型验证和标准化应用开发,可节省 60% 以上的基础编码时间。使用时需注意: 表设计需包含关键管理字段(如 last_changed 时间戳) 向导配置决定分层架构和命名规范 生成结果包含可立即预览的 Fiori Elements 界面 后续可专注于业务逻辑增强(校验、权限等)

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 1274

Hive的三种安装方式(内嵌模式,本地模式远程模式)

一、安装模式介绍: Hive官网上介绍了Hive的3种安装方式,分别对应不同的应用场景。 1、内嵌模式(元数据保村在内嵌的derby种,允许一个会话链接,尝试多个会话链接时会报错) 2、本地模式(本地安装mysql 替代derby存储元数据) 3、远程模式(远程安装mysql 替代derby存储元数据) 二、安装环境以及前提说明: ...

1429

秋招突击——笔试整理——8/25——拼多多笔试整理

继续加油! 转变思维,有简单到复杂,由直观到抽象,这种贪心模拟的题目一直是这样的!

Blackoutdragon的博客 2400

关于hive的启动和连接

关于hadoop启动,hive的启动和连接。

issey的博客 7717

【WRFDA教程】客观分析(OBSGRID)详解

客观分析(OBSGRID)详解

WW、forever的博客 1133

价值微笑曲线与AI公司的位置

1. 背景介绍 1.1 问题由来 自20世纪60年代,哈佛大学商学院教授西奥多·波特提出了“价值链”理论以来,企业如何构建竞争优势成为企业经营管理领域的研究重点。随着全球化的发展和科技进步,企业竞争环境发生了深刻变化,传统价值链管理模式逐渐显现出局限性。近年来,全球竞争格局由成本竞争转向创新竞争,企业的生存

欢迎来到我的优快云空间!这里聚焦AI大模型应用实战,分享前沿技术、实战案例与开发经验。 1095

Hive环境搭建_远程部署

此时ZK和hadoop集群应该还在启动检查启动后在浏览器输入node19870查看安全模式是否为off,如果为SafemodeisON.则输入强制关闭然后输入以下命令,创建目录并设置权限要先启动ZK和hdoophive-site.xml中要输入自己的mysql用户名和密码创建目录时确保SafemodeisOFF启动hiveserver2后要等2分钟输入!hive2//node110000后不用输密码直接回车httpshttps。...

qq_43389032的博客 867

图神经网络实战(5)——常用图数据集

Cora 和 Facebook Page-Page 是图神经网络领域中经常使用的两个基准图数据集,通常用来比较不同模型的性能。在本节中,介绍了如何使用 PyTorch Geometric 库提供的数据集类加载 Cora 和 Facebook Page-Page 数据集,并探索了两个数据集的主要特征。

盼小辉丶的博客 1万+

shell命令执行hive脚本(hive交互,hive的shell编程)

Hive执行方式Hive的hql命令执行方式有三种:1、CLI 方式直接执行 2、作为字符串通过shell调用hive –e执行(-S开启静默,去掉”OK”,”Time taken”) 3、作为独立文件,通过shell调用 hive –f或hive –i执行执行 方式1键入“hive”,启动hive的cli交互模式。Set可以查看所有环境设置参数,并可以重设。其他命令如, Use datab

longshenlmj的专栏 6万+

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

ssm框架搭建

这个是一个在idea上成功跑起来的ssm框架项目,保存在这里方便以后使用直接下载

上一篇: hive基本构架思想,和hadoop,mysql的关系
下一篇: Scala 在win和linux上的安装步骤,Scala连接idea的步骤
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值