hive java_method reflect

已于 2023-02-05 20:21:14 修改
阅读量215 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： Hive 文章标签： hive
于 2020-12-20 16:24:18 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_43192537/article/details/111440478
博客介绍了Hive相关内容，提到Hive有两个函数可调用Java中的方法，前提是调用jdk中内置的静态方法，若Java方法所在的jar包不是Hive自带的，可使用add jar添加。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

导航

hive outline

链接

以下两个函数可以去调用java中的方法。前提是：

  1. jdk中内置的静态方法
  2. 如果java方法所在的jar包不是hive自带的，可以使用 add jar添加进来

hive java_method

--hive调用java方法
-- 该函数是参数不定长函数，参数1填类名，参数2填静态方法名，后面填java方法的入参
select java_method("java.lang.Math","max",11,22);
-- 输出 22

hive reflect

--hive调用java方法
-- 该函数是参数不定长函数，参数1填类名，参数2填静态方法名，后面填java方法的入参
select reflect("java.lang.Math","max",11,22);
-- 输出 22
Hive新特性reflect函数介绍
Top5软件工程硕士，先后在京东、字节从事多年Java后端开发、实时和离线大数据开发
12-25 1870
reflect函数可以支持在sql中调用java中的自带函数，秒杀一切udf函数。 使用案例1：所有记录执行相同的java内置函数 hive中建一张表test_udf:column1(int),column2(int) 表中数据如下： 1,2 2,3 3,4 4,5 5,6 sql：select reflect("java.lang.Math","max",column1,col...
Hive函数大全
大数据Hive教程
01-02 372
Hive函数大全 现在虽然有很多SQL ON Hadoop的解决方案，像Spark SQL、Impala、Presto等等，但就目前来看，在基于Hadoop的大数据分析平台、数据仓库中，Hive仍然是不可替代的角色。尽管它的相应延迟大，尽管它启动MapReduce的时间相当长，但是它太方便、功能太强大了，做离线批量计算、ad-hoc查询甚至是实现数据挖掘算法，而且，和HBase、Spark都能整...
hive java 编程_Hive 编程专题之 - 自定义函数 Java 篇
weixin_39847437的博客
02-15 272
Hive 函数，总体分成内建函数与自定义函数。内建函数针对不同的数据类型有分成很多种，字符函数，数值函数，日期函数，转换函数等；自定义函数与我们在传统商业数据库中遇到的编译函数一个概念。在 SQL Server 中，我们使用 c# 来编写 Dll ，解决一些内建函数不能解决的问题，比如正则，而 Oracle 中则使用 Java 编写的 Jar 来扩展函数。Hive 中的自定义函数与 Oracle ...
method java_java中Method类有什么作用
weixin_36170766的博客
02-12 830
展开全部java Method类是最终类，不能继承，使用方式32313133353236313431303231363533e58685e5aeb931333337623364如下：/***/packagecom.timer.demo.objectsocket;importjava.lang.reflect.Method;/***@author崔冉**/publicclassInvok...
Hive函数
夫唯不争，故天下莫能与之争。
09-16 2432
Hive函数分为简单函数、窗口函数、分析混合函数、自定义函数（UDF/UDAF）等 查看Hive中函数基本命令 show functions ----列出所有函数 desc function count ----查看count函数的用法 desc function extended count ---查看详细用法，并且会举出一个简单例子 简单函数 1.if函数 hive
Hive中的基础函数(一)
weixin_44870066的博客
03-01 1642
hive基础函数
HiveQL函数8—其他杂项函数
MAYIBO—BG的专栏
01-21 1431
目录1.java_method(class, method[, arg1[, arg2..]]) , reflect(class, method[, arg1[, arg2..]])2.hash(a1[, a2...])3.current_user()4.logged_in_user()5.current_database()6.md5(string/binary)7.sha1(string/bi...
java 连接hive2_无法通过JAVA连接到HIVE2
weixin_29688227的博客
02-13 522
参考Hive2创建了一个简单的java程序连接到HIVE2服务器(非本地)在eclipse中的类路径中添加了上述链接中的所有提到的jar,但是当我运行代码时它会抛出一个错误：09:42:35,580 INFO Utils:285 - Supplied authorities: hdstg-c01-edge-03:2000009:42:35,583 INFO Utils:372 - Resolv...
Hive Error in configuring object Caused by: java.lang.reflect.InvocationTargetException
weixin_46784562的博客
08-13 1902
报错日志 在一次Hive任务中出现报错，查看yarn日志如下，由于网上没有搜到解决办法，所以自己在官方issue中找到解决办法并记录下 2021-07-31 14:23:11,467 WARN [main] org.apache.hadoop.mapred.YarnChild: Exception running child : java.lang.RuntimeException: Error in configuring object at org.apache.hadoop.util.Reflect
Hive 高级操作（三）之 Hive 内置函数
weixin_44387652的博客
03-09 1278
Hive 高级操作（三）之 Hive 内置函数1、Hive 内置函数2、测试内置函数3、展示内置函数4、内置函数列表4.1、关系运算4.2、数学运算4.3、逻辑运算4.4、复合类型构造函数4.5、数值计算函数4.6、集合操作函数4.7、类型转换函数4.8、日期函数4.9、条件函数4.10、字符串函数4.11、混合函数4.12、XPath 解析 XML 函数4.13、汇总统计函数（UDAF）4.14、表格生成函数 Table-Generating Functions (UDTF) 1、Hive 内置函数 内容
Hive常用函数 -- 混合函数和XPath 解析 XML 函数
storm_fury
03-12 5355
混合函数 调用 Java 函数：java_method 语法: java_method(class, method[, arg1[, arg2…]]) 返回值: varies 说明: 调用 Java 中的方法处理数据。 hive> select java_method("java.net.URLEncoder", "encode", 'http://www.baidu.com',"UTF...
大数据技术架构(组件)14——Hive：掩码函数&杂项函数
sysocc的博客
02-02 453
计算 SHA-2 系列哈希函数（SHA-224、SHA-256、SHA-384 和 SHA-512）（从 Hive 1.3.0 开始））。默认情况下，大写字母转换为“X”，小写字母转换为“x”，数字转换为“n”。例如， mask("abcd-EFGH-8765-4321", "U", "l", "#") 结果为 llll-UUUU-####-####例如， mask_show_last_n("1234-5678-8765-4321", 4) 结果为 nnnn-nnnn-nnnn-4321。
hive outline
qq_43192537的博客
07-01 976
hive outline
Hive 编程专题四： 自定义函数 Java 篇
wujiandao的专栏
11-15 1216
函数，总体分成内建函数与自定义函数。 内建函数针对不同的数据类型有分成很多种，字符函数，数值函数，日期函数，转换函数等； 自定义函数是构建于这些基础内建函数之上，用自定义的逻辑实现返回结果的函数。针对返回结果又可分为单值函数和多值以及表值函数。 1 常看所有内建和自建的函数 show functions ; 注意：Hive 2.3.3 内建函数 271 个 describe function f...
Hive的安装和使用以及Java操作hive
优快云专家-微编程的博客
12-20 1万+
Hive 引言 简介 hive是facebook开源，并捐献给了apache组织，作为apache组织的顶级项目(hive.apache.org)。 hive是一个基于大数据技术的数据仓库(DataWareHouse)技术，主要是通过将用户书写的SQL语句翻译成MapReduce代码，然后发布任务给MR框架执行，完成SQL 到 MapReduce的转换。可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。 总结 Hive是一个数据仓库 Hive构建在HDFS上，可以存储海量数据。 Hive
Hive 之 Java API 操作
热门推荐
harvey的博客
08-29 2万+
Java 想要访问Hive，需要通过beeline的方式连接Hive，hiveserver2提供了一个新的命令行工具beeline，hiveserver2 对 之前的hive做了升级，功能更加强大，它增加了权限控制，要使用beeline需要先启动hiverserver2，再使用beeline连接1.beeline 的 使用启动hiverserver2$ hiveserver2使用beeline连接h
Hive调用Java类ReflectUDF
雨钓的专栏
04-16 3823
hive调用java类
hive函数实例
CherishL_的专栏
08-22 1918
1.and和or的优先级 and优先级大于orroot@ubuntu:~# cat windfunc 1001 100.0 ABC 1001 150.0 BCD 1001 200.0 CDE 1001 150.0 DEF 1002 200.0 ABC 1002 200.0 ABC 1002 100.0 BCD 1002
from pyflink.datastream import StreamExecutionEnvironment from pyflink.table import StreamTableEnvironment, EnvironmentSettings, DataTypes from pyflink.table.udf import udf import os # 定义处理CDC操作的UDF @udf(result_type=DataTypes.STRING()) def process_cdc_op(op): """将CDC操作转换为可读的标签""" return { 'I': 'INSERT', 'U': 'UPDATE', 'D': 'DELETE' }.get(op, 'UNKNOWN') def main(): env = StreamExecutionEnvironment.get_execution_environment() env.set_parallelism(1) env.enable_checkpointing(5000) # 添加必要的连接器JAR包 flink_home = os.getenv('FLINK_HOME', '/opt/flink') env.add_jars( f"file://{flink_home}/lib/flink-connector-kafka-1.17.1.jar", f"file://{flink_home}/lib/flink-connector-jdbc-1.17.1.jar", f"file://{flink_home}/lib/flink-sql-connector-hive-3.1.2_2.12-1.16.3.jar", f"file://{flink_home}/lib/mysql-connector-java-8.0.28.jar", f"file://{flink_home}/lib/hive-exec-3.1.2.jar", ) settings = EnvironmentSettings.new_instance().in_streaming_mode().build() t_env = StreamTableEnvironment.create(env, environment_settings=settings) # 注册UDF t_env.create_temporary_function("process_cdc_op", process_cdc_op) # 解决方案1: 使用默认数据库 t_env.execute_sql(""" CREATE CATALOG hive_catalog WITH ( 'type' = 'hive', 'hive-conf-dir' = '/opt/hive/conf' ) """) t_env.use_catalog("hive_catalog") # 1. 创建Kafka源表 t_env.execute_sql(""" CREATE TABLE kafka_user_meal ( id STRING, review STRING, rating DOUBLE, review_time STRING, user_id STRING, meal_id STRING, op STRING, ts AS TO_TIMESTAMP(FROM_UNIXTIME(CAST(review_time AS BIGINT))), WATERMARK FOR ts AS ts - INTERVAL '5' SECOND, PRIMARY KEY (id) NOT ENFORCED ) WITH ( 'connector' = 'kafka', 'topic' = 'cleaned-user-meal-reviews', 'properties.bootstrap.servers' = 'master:9092,slave01:9092,slave02:9092', 'properties.group.id' = 'flink-cdc-group', 'scan.startup.mode' = 'latest-offset', 'format' = 'json', 'json.ignore-parse-errors' = 'true' ) """) # 2. 创建Hive表 t_env.execute_sql(""" CREATE TABLE IF NOT EXISTS hive_user_meal_cdc ( id STRING, review STRING, rating DOUBLE, review_time STRING, user_id STRING, meal_id STRING, operation_type STRING, operation_ts TIMESTAMP(3), op STRING ) PARTITIONED BY (op) STORED AS ORC TBLPROPERTIES ( 'sink.partition-commit.policy.kind' = 'metastore,success-file', 'auto-compaction' = 'true' ) """) # 3. 创建MySQL表 t_env.execute_sql(""" CREATE TABLE mysql_user_meal ( id STRING PRIMARY KEY NOT ENFORCED, review STRING, rating DOUBLE, review_time TIMESTAMP(3), user_id STRING, meal_id STRING, last_operation STRING, update_time TIMESTAMP(3) ) WITH ( 'connector' = 'jdbc', 'url' = 'jdbc:mysql://mysql-host:3306/user_meal', 'table-name' = 'user_meal_reviews', 'username' = 'root', 'password' = '5266', 'driver' = 'com.mysql.cj.jdbc.Driver', 'sink.buffer-flush.max-rows' = '100', 'sink.buffer-flush.interval' = '5s' ) """) # 4. 写入Hive t_env.execute_sql(""" INSERT INTO hive_user_meal_cdc SELECT id, review, rating, review_time, user_id, meal_id, process_cdc_op(op) AS operation_type, ts AS operation_ts, op FROM kafka_user_meal """) # 5. 写入MySQL（优化查询） latest_data = t_env.sql_query(""" SELECT id, LAST_VALUE(review IGNORE NULLS) AS review, LAST_VALUE(rating IGNORE NULLS) AS rating, MAX(ts) AS review_time, LAST_VALUE(user_id IGNORE NULLS) AS user_id, LAST_VALUE(meal_id IGNORE NULLS) AS meal_id, LAST_VALUE(process_cdc_op(op) IGNORE NULLS) AS last_operation, CURRENT_TIMESTAMP AS update_time FROM kafka_user_meal WHERE op <> 'D' GROUP BY id """) t_env.create_temporary_view("latest_user_meal", latest_data) t_env.execute_sql(""" INSERT INTO mysql_user_meal SELECT * FROM latest_user_meal """) env.execute("Flink CDC to Hive and MySQL Pipeline") if __name__ == '__main__': main() 这个代码能不能走得通？已经运行了一遍，hive中已经存在表kafka_user_meal，但是无法查看数据 at java.lang.reflect.Method.invoke(Method.java:498) at org.apache.hadoop.util.RunJar.run(RunJar.java:328) at org.apache.hadoop.util.RunJar.main(RunJar.java:241) FAILED: SemanticException Line 0:-1 Invalid column reference 'TOK_ALLCOLREF' 1962568 [199a4ed1-e39e-47c4-ade9-ff69770529cc main] ERROR org.apache.hadoop.hive.ql.Driver - FAILED: SemanticException Line 0:-1 Invalid column reference 'TOK_ALLCOLREF' org.apache.hadoop.hive.ql.parse.SemanticException: Line 0:-1 Invalid column reference 'TOK_ALLCOLREF' at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genColListRegex(SemanticAnalyzer.java:3761) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genSelectPlan(SemanticAnalyzer.java:4526) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genSelectPlan(SemanticAnalyzer.java:4338) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genPostGroupByBodyPlan(SemanticAnalyzer.java:10566) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genBodyPlan(SemanticAnalyzer.java:10505) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genPlan(SemanticAnalyzer.java:11418) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genPlan(SemanticAnalyzer.java:11288) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genOPTree(SemanticAnalyzer.java:12074) at org.apache.hadoop.hive.ql.parse.CalcitePlanner.genOPTree(CalcitePlanner.java:593) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.analyzeInternal(SemanticAnalyzer.java:12164) at org.apache.hadoop.hive.ql.parse.CalcitePlanner.analyzeInternal(CalcitePlanner.java:330) at org.apache.hadoop.hive.ql.parse.BaseSemanticAnalyzer.analyze(BaseSemanticAnalyzer.java:285) at org.apache.hadoop.hive.ql.Driver.compile(Driver.java:659) at org.apache.hadoop.hive.ql.Driver.compileInternal(Driver.java:1826) at org.apache.hadoop.hive.ql.Driver.compileAndRespond(Driver.java:1773) at org.apache.hadoop.hive.ql.Driver.compileAndRespond(Driver.java:1768) at org.apache.hadoop.hive.ql.reexec.ReExecDriver.compileAndRespond(ReExecDriver.java:126) at org.apache.hadoop.hive.ql.reexec.ReExecDriver.run(ReExecDriver.java:214) at org.apache.hadoop.hive.cli.CliDriver.processLocalCmd(CliDriver.java:239) at org.apache.hadoop.hive.cli.CliDriver.processCmd(CliDriver.java:188) at org.apache.hadoop.hive.cli.CliDriver.processLine(CliDriver.java:402) at org.apache.hadoop.hive.cli.CliDriver.executeDriver(CliDriver.java:821) at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:759) at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:683) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) at java.lang.reflect.Method.invoke(Method.java:498) at org.apache.hadoop.util.RunJar.run(RunJar.java:328) at org.apache.hadoop.util.RunJar.main(RunJar.java:241) hive> DESCRIBE FORMATTED kafka_user_meal; OK # col_name data_type comment # Detailed Table Information Database: user_meal OwnerType: USER Owner: null CreateTime: Wed Jun 18 17:53:08 CST 2025 LastAccessTime: UNKNOWN Retention: 0 Location: hdfs://master:9000/user/hive/warehouse/user_meal.db/kafka_user_meal Table Type: MANAGED_TABLE Table Parameters: flink.comment flink.connector kafka flink.format json flink.json.ignore-parse-errors true flink.properties.bootstrap.servers master:9092,slave01:9092,slave02:9092 flink.properties.group.id flink-cdc-group flink.scan.startup.mode latest-offset flink.schema.0.data-type VARCHAR(2147483647) NOT NULL flink.schema.0.name id flink.schema.1.data-type VARCHAR(2147483647) flink.schema.1.name review flink.schema.2.data-type DOUBLE flink.schema.2.name rating flink.schema.3.data-type VARCHAR(2147483647) flink.schema.3.name review_time flink.schema.4.data-type VARCHAR(2147483647) flink.schema.4.name user_id flink.schema.5.data-type VARCHAR(2147483647) flink.schema.5.name meal_id flink.schema.6.data-type VARCHAR(2147483647) flink.schema.6.name op flink.schema.7.data-type TIMESTAMP(3) flink.schema.7.expr TO_TIMESTAMP(FROM_UNIXTIME(CAST(`review_time` AS BIGINT))) flink.schema.7.name ts flink.schema.primary-key.columns id flink.schema.primary-key.name PK_3386 flink.schema.watermark.0.rowtime ts flink.schema.watermark.0.strategy.data-type TIMESTAMP(3) flink.schema.watermark.0.strategy.expr `ts` - INTERVAL '5' SECOND flink.topic cleaned-user-meal-reviews transient_lastDdlTime 1750240388 # Storage Information SerDe Library: org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe InputFormat: org.apache.hadoop.mapred.TextInputFormat OutputFormat: org.apache.hadoop.hive.ql.io.IgnoreKeyTextOutputFormat Compressed: No Num Buckets: -1 Bucket Columns: [] Sort Columns: [] Storage Desc Params: serialization.format 1 Time taken: 0.168 seconds, Fetched: 54 row(s) hive> SELECT > id, > review, > rating, > review_time, > user_id, > meal_id, > op, > ts > FROM kafka_user_meal > LIMIT 10; 2138986 [199a4ed1-e39e-47c4-ade9-ff69770529cc main] ERROR org.apache.hadoop.hive.ql.parse.CalcitePlanner - CBO failed, skipping CBO. org.apache.hadoop.hive.ql.parse.SemanticException: Line 2:4 Invalid table alias or column reference 'id': (possible column names are: ) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genAllExprNodeDesc(SemanticAnalyzer.java:12673) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genExprNodeDesc(SemanticAnalyzer.java:12613) at org.apache.hadoop.hive.ql.parse.CalcitePlanner$CalcitePlannerAction.genSelectLogicalPlan(CalcitePlanner.java:4539) at org.apache.hadoop.hive.ql.parse.CalcitePlanner$CalcitePlannerAction.genLogicalPlan(CalcitePlanner.java:4876) at org.apache.hadoop.hive.ql.parse.CalcitePlanner$CalcitePlannerAction.apply(CalcitePlanner.java:1661) at org.apache.hadoop.hive.ql.parse.CalcitePlanner$CalcitePlannerAction.apply(CalcitePlanner.java:1609) at org.apache.calcite.tools.Frameworks$1.apply(Frameworks.java:118) at org.apache.calcite.prepare.CalcitePrepareImpl.perform(CalcitePrepareImpl.java:1052) at org.apache.calcite.tools.Frameworks.withPrepare(Frameworks.java:154) at org.apache.calcite.tools.Frameworks.withPlanner(Frameworks.java:111) at org.apache.hadoop.hive.ql.parse.CalcitePlanner.logicalPlan(CalcitePlanner.java:1414) at org.apache.hadoop.hive.ql.parse.CalcitePlanner.getOptimizedAST(CalcitePlanner.java:1430) at org.apache.hadoop.hive.ql.parse.CalcitePlanner.genOPTree(CalcitePlanner.java:450) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.analyzeInternal(SemanticAnalyzer.java:12164) at org.apache.hadoop.hive.ql.parse.CalcitePlanner.analyzeInternal(CalcitePlanner.java:330) at org.apache.hadoop.hive.ql.parse.BaseSemanticAnalyzer.analyze(BaseSemanticAnalyzer.java:285) at org.apache.hadoop.hive.ql.Driver.compile(Driver.java:659) at org.apache.hadoop.hive.ql.Driver.compileInternal(Driver.java:1826) at org.apache.hadoop.hive.ql.Driver.compileAndRespond(Driver.java:1773) at org.apache.hadoop.hive.ql.Driver.compileAndRespond(Driver.java:1768) at org.apache.hadoop.hive.ql.reexec.ReExecDriver.compileAndRespond(ReExecDriver.java:126) at org.apache.hadoop.hive.ql.reexec.ReExecDriver.run(ReExecDriver.java:214) at org.apache.hadoop.hive.cli.CliDriver.processLocalCmd(CliDriver.java:239) at org.apache.hadoop.hive.cli.CliDriver.processCmd(CliDriver.java:188) at org.apache.hadoop.hive.cli.CliDriver.processLine(CliDriver.java:402) at org.apache.hadoop.hive.cli.CliDriver.executeDriver(CliDriver.java:821) at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:759) at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:683) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) at java.lang.reflect.Method.invoke(Method.java:498) at org.apache.hadoop.util.RunJar.run(RunJar.java:328) at org.apache.hadoop.util.RunJar.main(RunJar.java:241) FAILED: SemanticException [Error 10004]: Line 2:4 Invalid table alias or column reference 'id': (possible column names are: ) 2139034 [199a4ed1-e39e-47c4-ade9-ff69770529cc main] ERROR org.apache.hadoop.hive.ql.Driver - FAILED: SemanticException [Error 10004]: Line 2:4 Invalid table alias or column reference 'id': (possible column names are: ) org.apache.hadoop.hive.ql.parse.SemanticException: Line 2:4 Invalid table alias or column reference 'id': (possible column names are: ) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genAllExprNodeDesc(SemanticAnalyzer.java:12673) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genExprNodeDesc(SemanticAnalyzer.java:12613) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genSelectPlan(SemanticAnalyzer.java:4565) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genSelectPlan(SemanticAnalyzer.java:4338) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genPostGroupByBodyPlan(SemanticAnalyzer.java:10566) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genBodyPlan(SemanticAnalyzer.java:10505) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genPlan(SemanticAnalyzer.java:11418) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genPlan(SemanticAnalyzer.java:11288) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.genOPTree(SemanticAnalyzer.java:12074) at org.apache.hadoop.hive.ql.parse.CalcitePlanner.genOPTree(CalcitePlanner.java:593) at org.apache.hadoop.hive.ql.parse.SemanticAnalyzer.analyzeInternal(SemanticAnalyzer.java:12164) at org.apache.hadoop.hive.ql.parse.CalcitePlanner.analyzeInternal(CalcitePlanner.java:330) at org.apache.hadoop.hive.ql.parse.BaseSemanticAnalyzer.analyze(BaseSemanticAnalyzer.java:285) at org.apache.hadoop.hive.ql.Driver.compile(Driver.java:659) at org.apache.hadoop.hive.ql.Driver.compileInternal(Driver.java:1826) at org.apache.hadoop.hive.ql.Driver.compileAndRespond(Driver.java:1773) at org.apache.hadoop.hive.ql.Driver.compileAndRespond(Driver.java:1768) at org.apache.hadoop.hive.ql.reexec.ReExecDriver.compileAndRespond(ReExecDriver.java:126) at org.apache.hadoop.hive.ql.reexec.ReExecDriver.run(ReExecDriver.java:214) at org.apache.hadoop.hive.cli.CliDriver.processLocalCmd(CliDriver.java:239) at org.apache.hadoop.hive.cli.CliDriver.processCmd(CliDriver.java:188) at org.apache.hadoop.hive.cli.CliDriver.processLine(CliDriver.java:402) at org.apache.hadoop.hive.cli.CliDriver.executeDriver(CliDriver.java:821) at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:759) at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:683) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) at java.lang.reflect.Method.invoke(Method.java:498) at org.apache.hadoop.util.RunJar.run(RunJar.java:328) at org.apache.hadoop.util.RunJar.main(RunJar.java:241) hive> FROM kafka_user_meal 是在pycharm中运行到一般后进程被杀死的结果
最新发布
06-19
我们遇到的问题是：在Hive中创建了表`kafka_user_meal`，但是在Hive中查询时出现错误`Invalidcolumnreference`，并且错误信息提示`possiblecolumnnamesare:`，即没有列名。从Hive中描述表`kafka_user_meal`的输出...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值