从底层采集所有运行的HIVE SQL

本文介绍如何通过修改HIVE-SITE.XML配置文件,利用HivePreHook类实现在每个SQL执行前进行预处理。具体实现涉及实现ExecuteWithHookContext接口,并在HookContext中获取并打印SQL语句。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

 


版权
修改HIVE-SITE.XML,每个sql在执行之前都会去执行这个类,这个类实现
ExecuteWithHookContext接口
<property>
    <name>hive.exec.pre.hooks</name>
    <value>com.wending.hive.HivePreHook</value>
    <description>
      Comma-separated list of pre-execution hooks to be invoked for each statement. 
      A pre-execution hook is specified as the name of a Java class which implements the 
      org.apache.hadoop.hive.ql.hooks.ExecuteWithHookContext interface.
    </description>
  </property>
   2.示例代码,然后打包放在hive lib/路径下,不管从哪个路径访问的,命令行,JDBC等等都能把sql采集到。

public class HivePreHook implements ExecuteWithHookContext {
 
    public void run(HookContext hookContext) throws Exception {
        final HookContext hc = hookContext;
        try {
            new Thread(new Runnable() {
                @Override
                public void run() {
                    System.out.println(("执行了hive hook"));
                    final QueryPlan queryPlan = hc.getQueryPlan();
                    String querySql = queryPlan.getQueryStr();
                    System.out.println(querySql);
                }
            }).start();
        } catch (Exception e) {
            System.out.println(e.getMessage());
        }
    }
}
 
 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值