HiveJDBC

本文介绍了如何通过Java连接Hive Server 2,包括添加依赖、启动服务、编写并运行Hive JDBC示例,以及处理复杂SQL和权限问题。

1.添加包依赖

	    <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-common</artifactId>
            <version>2.7.6</version>
        </dependency>
        <!-- https://mvnrepository.com/artifact/org.apache.hive/hive-jdbc -->
        <dependency>
            <groupId>org.apache.hive</groupId>
            <artifactId>hive-jdbc</artifactId>
            <version>1.2.1</version>
        </dependency>

2.启动hiveserver2

hiveserver2 

在这里插入图片描述

3.查看RunJar端口

netstat -tnlp | grep (RunJarPID)

在这里插入图片描述

4.编写代码

import java.sql.*;
public class HiveJDBC {
    public static void main(String[] args) throws ClassNotFoundException, SQLException {
        Class.forName("org.apache.hive.jdbc.HiveDriver");
        Connection conn = DriverManager.getConnection("jdbc:hive2://master:10000/test1");
        Statement stat = conn.createStatement();
        ResultSet rs = stat.executeQuery("select * from students limit 10");
        while (rs.next()){
            int id = rs.getInt(1);
            String name = rs.getString(2);
            System.out.println(id+","+name);
        }
        rs.close();
        stat.close();
        conn.close();
    }
}

5.运行结果

在这里插入图片描述

注意

复杂sql(启动mapreduce任务的)需要加上用户,否者会报错。

Connection conn = DriverManager.getConnection("jdbc:hive2://master:10000/test1","root","");
### 使用 Hive JDBC 配置连接及示例代码 #### 1. 安装和配置 Cloudera Hive JDBC 驱动 为了实现 HiveJDBC 的集成,首先需要完成 Cloudera Hive JDBC 驱动的安装与配置。这通常涉及以下几个方面: - **下载驱动程序** 可以通过官方提供的链接下载 Hive JDBC Uber 驱动文件 `hive-jdbc-uber-2.6.5.0-292.jar`[^3]。 - **设置环境变量** 将下载好的 JAR 文件放置到项目的类路径下或者指定的库目录中。如果是在 Java 应用中运行,则可以通过 `-cp` 参数加载该 JAR 文件。 - **验证驱动可用性** 确认驱动已成功加载并能够正常工作。此过程可能需要测试简单的数据库查询操作来确认连通性[^1]。 #### 2. 构建连接字符串 构建用于连接 Hive 数据库的 URL 是使用 JDBC 接口的关键部分之一。标准的 Hive JDBC 连接字符串格式如下所示[^4]: ```plaintext jdbc:hive2://<host>:<port>/dbName;sess_var_list?hive_conf_list#hive_var_list ``` 其中 `<host>` 表示 Hive Server 所在主机名或 IP 地址;`<port>` 默认为 10000 或者由具体部署决定;而 `/dbName` 则指定了要访问的具体数据库名称。此外还可以附加一些额外属性以便进一步定制会话行为[^2]。 #### 3. 编写 Java 示例代码 下面给出一段完整的基于上述理论编写的 Java 示例代码片段,展示如何利用 JDBC 来执行基本 SQL 查询命令: ```java import java.sql.Connection; import java.sql.DriverManager; import java.sql.ResultSet; import java.sql.Statement; public class HiveJdbcClient { private static String driverName = "org.apache.hive.jdbc.HiveDriver"; public static void main(String[] args) throws Exception { try { Class.forName(driverName); // 替换以下参数为你自己的Hive服务信息 Connection con = DriverManager.getConnection( "jdbc:hive2://localhost:10000/default", "", ""); Statement stmt = con.createStatement(); String tableName = "test_hive_jdbc"; stmt.executeQuery("drop table if exists " + tableName); // 清理旧表 System.out.println("Creating table..."); stmt.executeUpdate("create table " + tableName+"(key int, value string)"); System.out.println("Inserting data into the table..."); stmt.execute("insert into "+tableName+" values(1,'value1')"); stmt.execute("insert into "+tableName+" values(2,'value2')"); ResultSet res = stmt.executeQuery("select * from " + tableName); while (res.next()) { // 输出结果集中的每一行数据 System.out.println(res.getInt(1)+"\t"+res.getString(2)); } } catch(Exception e){ e.printStackTrace(); throw new RuntimeException(e.getMessage()); } } } ``` 以上代码展示了创建表格、插入记录以及读取数据的过程。注意替换 `"jdbc:hive2://localhost:10000/default"` 中的相关字段以匹配实际使用的服务器地址和其他必要选项。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值