hive order by length() 报错

最新推荐文章于 2024-10-27 23:06:49 发布
原创 最新推荐文章于 2024-10-27 23:06:49 发布 · 837 阅读 · 9 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hive #sql

文章讨论了在HQL查询中遇到的错误，指出length(tag)作为列引用时需要改用别名taglen。同时提到在ORDERBY子句中只能使用普通函数如to_date()，不能使用聚合函数如count()和sum()。

hql如下
select length(tag) from table1 order by length(tag) limit 20;
报错FAILED: SemanticException [Error 10004]: Line…Invalid table alias or column reference ‘tag’: (possible column names are: _c0)

FAILED: SemanticException [Error 10004]: Line…Invalid table alias or column reference ‘tag’: (possible column names are: _c0)

修改
用别名替代length(tag)， 如下
select length(tag) as taglen from table1 order by taglen limit 20;

在order by中可以使用普通函数（如to_date()），但是不能使用聚合函数（如count(), sum()）。

AnillegalName
关注
【Hive】order by count() 报错
喜东东的博客
05-22 5188
order by count(id) 报错 hive> select date, count(id) as idnum from test group by date order by count(id) FAILED:SemanticException[Error 10004]:...Invalid table alias or column reference 'id':(possib...
hive中的order by ，sort by ,distribute by,cluster by的用法与区别
qq_39954916的博客
04-03 506
一、order by order by后面不跟limit的话，order by会强制将reduce number设置成1，不加limit,会将所有数据sink到reduce端来做全局排序。多个reducer无法保证全局有序，但是因为只有一个reducer，就导致当输入数据规模较大时，需要较长计算时间。 为了避免大规模时间全局排序的发射，可以设置如下参数： set hive.mapred.m...
hive sql报错：SQL 错误 [10004] [42000]: Error while compiling statement: FAILED: SemanticException [Error
Caiqiudan的博客
11-25 9732
SQL 错误 [10004] [42000]: Error while compiling statement: FAILED: SemanticException [Error 10004]: Line 64:0 Invalid table alias or column reference ‘T4’: (possible column names are: order_id, order_status, update_time, charge_id, charge_status, station_id.
Hive SQL报错：SemanticException [Error 10004]: Invalid table alias or column reference
Viga的博客
06-10 1万+
Hive SQL报错：SemanticException [Error 10004]: Invalid table alias or column reference 在python脚本中执行Hive SQL python脚本如下： sql="""SELECT test_url, (case when substring_index(test_url, '/', 1) == 'dev.test.com`:`1024/' then substr(test_url,25) when substring_inde
【SQL学习篇】order by length(ID),ID 排序
毛兔记录：工作小技巧、遇到的一些典型bug、问题汇总、小知识。
09-12 1879
当使用order by排序出现以下情况，是因为该字段编码不是NUMBER，导致按字符的形式排序了 这时，使用order by length(ID),ID即可
order by排序
房东的jian的博客
02-04 455
#1.选择工资不在8000-17000的员工的姓名和工资，按工资降序 SELECT last_name,salary FROM employees ORDER BY salary DESC; #2.查询邮箱中包含e的员工信息，并按邮箱的字节数降序，再按部门号升序 SELECT * FROM employees ORDER BY LENGTH(email)DESC,departme...
为什么Hive中的group by后面不能使用字段别名？
雷恩Layne
04-19 3414
为什么Hive中的group by后面不能使用字段别名呢？看了这篇文章你将一目了然。 文章目录1. 案例说明2. 分析原因3. 解决办法4. 执行效率5. 总结 1. 案例说明 我们以一个例子来说明。 （1）数据 创建business.txt，内容如下： jack,2017-01-01,10 tony,2017-01-02,15 jack,2017-02-03,23 tony,2017-01-04,29 jack,2017-01-05,46 jack,2017-04-06,42 tony,2017-01-
大数据技术之Hive
小菜菜的博客
10-27 1411
声明：原文来自于《尚硅谷》免费学习资料 文章仅供学习，如需详细了解请光顾《尚硅谷》官网
【Hive】Hive错误记录
Together
04-05 7270
很开心，今天在搭建Hive的时候，遇到一个错误，如下???? WARN [main] util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable Exception in thread "main" java.la...
运行mapreduce报错CannotObtainBlockLengthException: Cannot obtain block length for LocatedBlock
qq_30868737的博客
05-18 633
报错日志如下： Error: java.io.IOException: java.lang.reflect.InvocationTargetException at org.apache.hadoop.hive.io.HiveIOExceptionHandlerChain.handleRecordReaderCreationException(HiveIOExceptionHandlerChain.java:97) at org.apache.hadoop.hive.io.H
看一遍就理解：order by 详解
cdfunlove的博客
07-20 1651
前言 日常开发中，我们经常会使用到order by，亲爱的小伙伴，你是否知道order by 的工作原理呢？order by的优化思路是怎样的呢？使用order by有哪些注意的问题呢？本文将跟大家一起来学习，攻克order by~ 一个使用order by 的简单例子 假设用一张员工表，表结构如下： CREATETABLE`staff`( `id`BIGINT(11)AUTO_INCREMENTCOMMENT'主键id', `id_card`VARCHAR(20)...
排序查询（order by）——MySQL
mankeywang的博客
04-06 1778
文章目录排序查询排序查询导图格式例题 排序查询 排序查询导图 格式 order by 排序列表 [asc/desc]（升序、降序） select [查询列表] from [表[] where [筛选条件] order by 排序列表 [asc/desc]（升序、降序） 特点： asc：升序，desc：降序，如果不写默认是升序 order by 子句支持单个字段、多的字段、表达式、函数、别名 order by 子句一般放在查询语句的最后面 例题 查询员工信息要求工资从高到低排序 select
Hive查询报错 Invalid table alias or column reference ‘create_time‘: (possible column names are: _c0, _c1
热门推荐
止鱼
10-11 6万+
在执行Hive操作的时候有时候会遇到这种报错： Invalid table alias or column reference 'create_time': (possible column names are: _c0, _c1, _c2, _c3) 下面来分析这个条Hive语句： select to_date(create_time) as time, count(*) as al
hive上报ERROR:10004错误和order by ,sort by区别
西瓜追随螃蟹的脚步
08-28 3973
在使用hive写hql时报10004错误，提示列字段名称错误
MySQL中排序查询
qq_45722267的博客
01-16 496
MySQL中排序查询 1、语法 select 查询列表 from 表 where 筛选条件 order by 排序列表 [asc|desc] 2、特点 ①其中desc为降序（从高到低），asc为升序（从低到高） 如果不写，则默认为升序 ②order by 语句支持单个字段、多个字段、表达式、函数、别名的查询 ③order by 语句一般是放在语句的最后面，limit子句除外 3、按照字符串的长度进行排序（按函数进行排序） length(‘字符串’);//利用该函数求出字符串的长度 select * from
hive中的order by的用法及坑的所在
weixin_42965737的博客
09-13 1197
order by 后面是默认的是上无边界到当前行，但是如果有的行数的值相同，则会出现错误，今天就提醒一下： explode(partition by .. order by.. ),order by 后面最好跟上范围，这样就不会出现上述问题。
order by 排序查询 -小林月
qq_53953480的博客
03-23 160
案例三：如果按照一个字段排序以后，需要再次排序。案例：按照学号从小大进行显示名字和班级。案例二：按照姓名长度进行排序。
MySQL学习笔记(3)
qq_38883271的博客
05-14 168
排序查询 简单排序查询：员工工资降序（升序）查询： USE test; SHOW TABLES; SELECT employee_name,salary FROM employee ORDER BY salary DESC; 运行结果： DESC #降序 ASC #升序 #不写默认是升序 复杂排序查询：含有where的条件筛选排序查询： 计算员工年薪并降序查询 USE test; SHOW TABLES; SELECT employee_id,em..
启动hive的metastore服务报错
最新发布
06-26
### Hive Metastore 启动失败常见问题及解决方案 在启动 Hive Metastore 服务时，可能会遇到多种报错信息。以下是几种常见的错误类型及其对应的解决方法： #### **1. Version information not found in metastore** 该错误通常表示当前使用的 Hive 版本与数据库中存储的 schema 版本不匹配。Hive 会通过 `metastore` 数据库记录 schema 的版本信息，并在启动时进行校验。如果发现版本不一致，就会抛出此异常。 **解决方案：** - 修改配置文件 `hive-site.xml` 中的以下参数： ```xml <property> <name>hive.metastore.schema.verification</name> <value>false</value> </property> ``` 该设置将跳过版本校验过程，适用于测试环境或临时修复[^1]。 - 如果是生产环境，建议使用 `schematool` 工具升级元数据 schema： ```bash schematool -dbType mysql -upgradeSchema ``` 请根据实际使用的数据库类型替换 `-dbType` 参数值。 #### **2. 数据库连接失败或驱动缺失** 当修改 `javax.jdo.option.ConnectionURL` 指向一个新的数据库后，可能出现连接失败或者缺少 JDBC 驱动的情况。 **解决方案：** - 确保 `hive-site.xml` 中的数据库连接信息正确无误，包括 URL、用户名和密码： ```xml <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql://localhost:3306/hive_metastore?createDatabaseIfNotExist=true</value> </property> <property> <name>javax.jdo.option.ConnectionDriverName</name> <value>com.mysql.cj.jdbc.Driver</value> </property> <property> <name>javax.jdo.option.ConnectionUserName</name> <value>hiveuser</value> </property> <property> <name>javax.jdo.option.ConnectionPassword</name> <value>hivepassword</value> </property> ``` - 确认 MySQL JDBC 驱动（如 `mysql-connector-java.jar`）已放置在 Hive 的 `lib` 目录下，且版本兼容当前 MySQL 服务器[^2]。 #### **3. 元数据验证失败** 有时会提示类似于 `DataNucleus` 元数据验证失败的问题，尤其是在切换数据库之后。 **解决方案：** - 在 `hive-site.xml` 中添加以下两个属性并将其值设为 `false`： ```xml <property> <name>datanucleus.metadata.validate</name> <value>false</value> </property> <property> <name>hive.metastore.schema.verification</name> <value>false</value> </property> ``` 这样可以禁用元数据验证机制，避免因 schema 不匹配导致启动失败[^2]。 #### **4. 初始化数据库 schema 失败** 如果目标数据库尚未初始化 schema，则可能导致启动失败。 **解决方案：** - 使用 `schematool` 初始化 schema： ```bash schematool -dbType mysql -initSchema ``` 该命令会在指定数据库中创建所需的表结构和初始数据。 #### **5. 权限不足** Hive 用户可能没有对目标数据库执行操作的权限。 **解决方案：** - 登录到数据库管理系统中，授予用户相应权限： ```sql GRANT ALL PRIVILEGES ON hive_metastore.* TO 'hiveuser'@'%' IDENTIFIED BY 'hivepassword'; FLUSH PRIVILEGES; ``` ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值