通过远程jdbc方式连接到hive数据仓库

最新推荐文章于 2025-05-23 11:05:34 发布
原创 最新推荐文章于 2025-05-23 11:05:34 发布 · 3.8k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#数据仓库 #jdbc #hive

本文介绍了如何通过远程jdbc连接到hive数据仓库。首先，启动hiveserver2服务器并确保其在10000端口上监听。然后，使用beeline命令行连接，并解决可能出现的权限问题。在hadoop配置文件中设置proxyuser属性，并赋予必要权限。接着，通过beeline操作hive，如显示数据库、切换数据库和查看表。最后，指导在java项目中添加maven依赖，以实现jdbc连接。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

1.启动hiveserver2服务器，监听端口10000

$>hive --service hiveserver2 &

netstat -anop | grep 10000

 

2.通过beeline命令行连接到hiveserver2

$>beeline //进入beeline命令行(于hive --service beeline)

最低0.47元/天 解锁文章

200万优质内容无限畅学
利用java jdbc从hive提取日志数据进行简单处理
一剑飘雪之西门吹的博客
11-01 3846
利用java jdbc从hive数据库提取日志数据进行简单处理
通过JDBC连接Hive
夏天小厨的博客
03-29 3811
使用JDBC去操作hive可能是程序员们比较喜欢的一种方式，今天来总结一下使用java api来对hive进行增删查改，这里我主要演示对hive表中数据的操作，不创建表已经改变表原有的结构。本文基于hive已经能正常使用的情况。 首先hive必须以服务方式启动，平台默认启动时hive server2 模式。hiveserver2是比hiveserver更高级的服务模式，提供了hiveserver...
idea使用scala技术连接hive，成功教学
weixin_56617616的博客
12-29 3486
1.首先要有Hadoop服务全部开启，Hadoop搭建点以下链接 (10条消息) 必成功的Hadoop环境搭建jdk环境搭建-超详细操作_吃土的程序员的博客-优快云博客_hadoop搭建jdk 2.第二点要把hive搭建好，因为链接hive首先要hive没有问题 (10条消息) 超详细Hive环境手把手搭配教学，学就会，ODS层搭配成功搭建_吃土的程序员的博客-优快云博客 3.接下来就是ider的操作教程 3.1打开ider 3.2新建项目 3.3新建maven项目点击继.
远程连接hive
04-07
hive基本使用技能，工作中的笔记，方便使用，分享大家看看
【入门篇】HIVE的本地模式安装及远程模式配置
最新发布
2503_91686028的博客
05-23 755
本文详细介绍了Hive的本地模式安装及远程模式配置步骤。Hive是一个基于Hadoop的数据仓库工具，能够将SQL语句自动编译为MapReduce任务。本地模式安装包括下载Hive压缩包、配置环境变量、修改配置文件、启动Hadoop集群、检查MySQL状态、创建并配置hive-site.xml文件、上传MySQL驱动包以及初始化元数据。远程模式配置则涉及修改hive-site.xml和core-site.xml文件，配置hiveserver2和metastore服务，并提供了多种启动方式。最后，文章提到可以
使用JDBC访问Hive表中的数据
红豆和绿豆的博客
01-17 674
package hive; import java.sql.Connection;   public class HiveJdbcClient {  private static String driverName = "org.apache.hadoop.hive.jdbc.HiveDriver";       private static String url = "jdbc:
Hive教程（08）- JDBC操作Hive
阿甘兄
02-23 2565
文章目录01 引言02 开发前准备2.1 步骤1：环境启动2.2 步骤2：创建数据库03 项目搭建3.1 步骤1：新建maven项目3.2 步骤2：创建hive连接工具类04 Hive单元测试4.1 创建表4.2 导入数据4.3 查看数据05 文末 01 引言 本文的代码已上传至GitHub，有兴趣的同学可以参阅：https://github.com/ylw-github/java-hive-demo 在前面的教程，已经初步入门hive了，有兴趣的同学可以参阅： 《Hive教程（01）- 初识Hiv
scala jdbc远程访问hive数据仓库
HFDY的博客
09-25 3568
需求：         通过简单的Scala代码远程连接Hive，查询Hive表数据并将数据转存到本地。另外，用Scala查询到数据后，我们还可以将查询到的ResultSet集合转化为RDD或者DataFrame进行scala的算子运算    第一步：启动服务器以及需要的服务（hiveserver2）远程连接端口默认配置为10000 hive  --service hiveserver2...
hive jdbc驱动 2.5.15 及 2.6.1两个版本
01-26
Hive JDBC驱动是连接Hadoop生态系统中的Hive数据仓库的重要桥梁，它允许用户通过Java数据库连接（JDBC）标准来访问Hive。在Hive 2.5.15和2.6.1这两个版本中，都包含了对Hive查询语言（HQL）的支持以及对大数据处理的...
连接hive依赖的jar包_hive连接方式
01-05
Hive提供了JDBC驱动，使得我们可以通过Java应用程序或IDE（如DataGrip）连接到Hive服务。Hive的JDBC驱动通常包含在名为`hive-jdbc`的JAR包中，这个包包含了与Hive通信所需的全部类和接口。 2. **Hive连接方式** ...
通过JDBC连接hive
weixin_34315485的博客
09-15 392
hive是大数据技术簇中进行数据仓库应用的基础组件，是其它类似数据仓库应用的对比基准。基础的数据操作我们可以通过脚本方式以hive-client进行处理。若需要开发应用程序，则需要使用hive的jdbc驱动进行连接。本文以hive wiki上示例为基础，详细讲解了如何使用jdbc连接hive数据库。hive wiki原文地址： https://cwiki.ap...
【JDBC-Hive】使用JDBC操作Hive数据库
weixin_53543905的博客
03-28 2262
在用JDBC操作Hive数据库执行写入操作时，由于要使用。ps.setString(字段名, null)ps.setString(字段名, 字段值)的方式进行数据值的设置，所以无可避免的会出现。【JDBC-Hive】使用JDBC操作Hive数据库
Hive入门教程＜3＞| 使用JDBC操作hive的两种方式
懵懂bigdata象
11-19 7755
JDBC操作Hive一、启动hadoop集群二、在hive的安装目录下的bin/目录下启动hiveserver2三、两种JDBC的操作方式一、虚拟机中的hive的beeline端二、Windows本地idea集成开发环境1、创建maven项目并添加依赖到pom.xml文件2、代码编写:2、执行程序 一、启动hadoop集群 hive是基于hadoop 二、在hive的安装目录下的bin/目录下启动hiveserver2 ./hive2server2 三、两种JDBC的操作方式 一、虚拟机中的hive的b
hive通过JDBC获取元数据信息
m1913843179的博客
06-04 1950
JDBC获取数据库、参数、结果集元数据 DataBaseMetaData ResultSet getCatalogs() //获取数据库 Connection getConnection() //获取连接 ResultSet getColumns(String catalog, String schemaPattern, String tableNamePattern, String columnNamePattern) //获取所有的列 ResultSet getSchemas() //获取schem
二次开发Spark实现JDBC读取远程租户集群Hive数据并落地到本集群Hive的Hive2Hive数据集成【Java】
虎鲸不是鱼
05-04 2997
背景 肤浅的SQL Boy们可能只知道pyspark构建出sparkSession对象【当然要enableHiveSupport】后，写一句SQL： spark.sql(“这里写一句SQL字符串”); 然后spark就会根据此处的SQL，完成各种select查数据、insert overwrite灌数据到结果表的种种操作。对SQL Boy们来说，足够用了，毕竟搞数仓和ETL的可能只会SQL也只用得到SQL。 但是平台开发，这种程度显然是不够的。例如最常见的数据集成、数据入湖，一定会涉及跨集群、多集群、跨Ke
spark 通过jdbc读取hive jdbc
wang972779876的博客
06-09 4515
1.通过spark提供的jdbc方式连接代码如下 val spark = SparkSession.builder().master("local").getOrCreate() val rdd = spark.read.format("jdbc") .format("jdbc") .option("driver", "org.apache.hive.jdbc.HiveDriver") .option("url", "jdbc:hive2://hiveserv
使用jdbc连接Hive
热门推荐
LSB19930706的博客
07-20 1万+
一、hive提供了jdbc的连接方式，就是在hive的某个计算节点开启hiveserver2启动方法如下 默认已启动hadoop 先启动hive元数据服务 hive --service metastore & 再启动hiveserver2服务 hive--servicehiveserver2 & 验证：如下，已通过beeline连接上hiveserver2，证明服务已开启 二、通过java jdbc连接hiveserver2 将这两个jar包从服务器上的hive li..
Hive的JDBC的连接方式
Kayleigh520的博客
01-04 6639
详细的讲解了idea如果远程访问hive2.3.7
Jdbc java 操作Hive表
star5610的博客
05-13 314
import java.sql.Connection; import java.sql.DriverManager; import java.sql.ResultSet; import java.sql.SQLException; import java.sql.Statement; public class Hive { private static String driverName = "org.apache.hive.jdbc.HiveDriver";//hive驱动名称 priva
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值