Hive 标识符列表及保留方法

已于 2022-05-07 10:48:31 修改
阅读量1.3k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 笔记 Hadoop Linux 文章标签： hive big data hadoop
于 2022-05-06 18:43:05 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/a6661314/article/details/124616089
本文介绍了Hive中的标识符列表，包括哪些是保留关键字。在创建表或字段时，应避免使用这些关键字。若需使用，官方提供了两种解决办法：一是使用倒引号包裹标识符，二是设置`hive.support.sql11.reserved.keywords=false`。了解这些细节能帮助你更规范地编写Hive语句。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Hive 标识符列表及保留方法

1、标识符列表

Hive 有一些保留的关键字，我们在执行一些语句时，不能将这些关键字作为标识符（Identifier），比如建表语句的 表名 或者 字段名，以下我们具体看看什么是 Hive 中的 标识符。

官方标识符列表：入口
在这里插入图片描述

2、保留标识符方法

如果你非要使用“保留的关键字”作为标识符，官网也给出了建议
在这里插入图片描述

原文如下：

Reserved keywords are permitted as identifiers if you quote them as described in Supporting Quoted Identifiers in Column Names (version 0.13.0 and later, see HIVE-6013). Most of the keywords are reserved through HIVE-6617 in order to reduce the ambiguity in grammar (version 1.2.0 and later). There are two ways if the user still would like to use those reserved keywords as identifiers: (1) use quoted identifiers, (2) set hive.support.sql11.reserved.keywords=false. (version 2.1.0 and earlier)

总结后就是如下两点：

  • 对标识符使用倒引号（backtick）；
  • set hive.support.sql11.reserved.keywords=false
Hive数据脱敏：企业隐私数据保护方案
AI天才研究院
05-14 694
随着《个人信息保护法》《数据安全法》及GDPR等法规的严格实施，企业需对Hive中存储的用户隐私数据（如PII/PI）进行严格保护。本文聚焦Hive环境下的隐私数据脱敏技术静态脱敏（数据导出场景）与动态脱敏（实时查询场景）的技术差异Hive数据脱敏的核心算法（掩码、替换、随机化等）实现与选型基于Hive UDF/UDTF的脱敏函数开发与集成企业级脱敏策略管理与合规性设计核心概念：定义静态/动态脱敏，解析Hive数据处理流程中的脱敏触发点。
Hive 数据仓库建设方案
AI天才研究院
08-02 1360
随着互联网公司、大型电子商务平台等业务的不断发展，海量的数据产生，对企业经营管理产生了深远的影响。数据仓库（Data Warehouse）作为数据集成、数据分析和报表展示的关键组件，广泛应用于企业各个角落，是实现数据驱动决策的重要工具之一。Hive数据仓库就是基于Hadoop生态圈的一个开源分布式数据仓库系统。Hive可以将结构化的数据存储在HDFS上，并通过SQL查询语言进行分析处理。
Hive的保留关键字
早拾碗吧的博客
05-20 649
Hive的保留关键字。
mysql迁移hive遇到保留字_hive 数据库迁移记录
weixin_42530793的博客
01-28 269
服务器更换,需要把hive使用的mysql库迁移到其他服务器上.整个过程很简单,就是数据库导出导入1.在原服务器将数据库导出$ mysqldump -h ip -u username -p metadata4ad >metadata4ad.sqlEnter password:tty:[4] jobs:[0] cwd:[/home/ad]$ ll metadata4ad.sql-rw-rw-r...
hive 建表语句_Impala建表失败之慎用关键字（保留字）
weixin_39978101的博客
11-25 2664
使用Impala创建Kudu表时遇到的小问题，需求是根据数据源Oracle中的表在Kudu数仓贴源层创建Kudu表。偷个小懒就直接生成了建表语句，然后就有提示啦，建表失败...1. 首先遇到的是A reserved word，也就是保留字Encountered: A reserved word cannot be used as an identifier: inout2. 然后又遇到了个EXPL...
Hive 从入门到精通 - 保留关键字与非保留关键字 （三）
zholeiv5
03-16 908
non-reserved keywords add, admin, after, analyze, archive, asc, before, bucket, buckets, cascade, change, cluster, clustered, clusterstatus, collection, columns, comment, compact, compactions, compute, concatenate, continue, data, databases, datetime, day,
hive知识点详解
qq_38190111的博客
07-24 969
Hive支持的常用数据类型和文件格式 Hive是一种构建在Hadoop上的数据仓库，Hive把SQL查询转换为一系列在Hadoop集群中运行的MapReduce作业，是MapReduce更高层次的抽象，不用编写具体的MapReduce方法。Hive将数据组织为表，这就使得HDFS上的数据有了结构，元数据即表的模式，都存储在名为metastore的数据库中。##### hive 语法不区分大小写 ...
hive综合应用案例-用户搜索日志分析.docx
05-15
- **user_id**：表示用户的唯一标识符，用于区分不同的用户。 - **search_keyword**：用户输入的搜索关键词。 - **search_time**：用户执行搜索的时间，可以是时间戳或具体的日期时间格式。 - **device_type**：用户...
hive3.1.0-antrl3.5.2-Hivegrammar源码.zip
08-23
Antlr是一种语言识别的工具，可以用来构造领域语言。... nonReserved，非保留的关键字可以作为标识符的。比如 select a as date from mytable 这个date不添加转义会报错的，但是该处如果添加 “ | KW_DATE ” dat
数仓工具—Hive关键字(11)
热门推荐
12-26 5万+
关键字是任何一门语言中都要的一些字符，这些字符都有特殊的含义，一般情况下用户不能直接使用的，因为编译器对关键字是有特殊处理的。 Hive有一些保留的关键字，我们在执行一些语句时，不能将这些关键字作为标识符（Identifier），比如建表语句的表名或者字段名
Hive函数大全（含例子）之字符串函数（String Functions）
qq_35921007的博客
04-10 2184
字符串函数 String Functions ascii(string str) 返回结果: 返回字符串str首字母的十进制ascii码 返回类型: int select ascii('ABC');-- 结果为 65 base64(binary bin) 返回结果: 将二进制转换为base64编码 返回类型: string select base64(encode('Uncle B...
hive执行建表语句报错 FailedPredicateException(identifier,{useSQL11ReservedKeywordsForIdentifier()}?)
T_Y_F_的博客
12-20 311
hive执行建表语句报错 FailedPredicateException(identifier,{useSQL11ReservedKeywordsForIdentifier()}?)
hive 创建/删除/截断 表(翻译自Hive wiki)
weixin_33766805的博客
01-04 323
这里罗列常用操作，更多参考 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-Create%2FDrop%2FTruncateTable   简单的创建表 create table table_name ( id int, d...
HIVE常见错误
shglt的博客
03-21 875
HIVE常见错误 hive表中字段使用保留字报错，需要将hive表中保留字段加引号使用, 否则会出现如下错误信息 Error: Error while compiling statement: FAILED: ParseException line 1:7 Failed to recognize ...
11.8 spark SQL读取hive数据
心雨先生
08-13 1699
1，启动hdfs集群 2，启动hive create database testdb 创建testdb库 关闭hive保留关键字检查功能： set hive.support.sql11.reserved.keywords=false 创建一张userlog表： CREATE TABLE IF NOT EXISTS testdb.userlog( date string , time...
hive关键字在mysql_Hive与Impala的关键字
weixin_32576389的博客
02-15 449
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。Fayson的github：https://github.com/fayson/cdhproject提示：代码块部分可以左右滑动查看噢1.Hive的关键字Hive有一些保留的关键字，我们在执行一些语句时，不能将这些关键字作为标识符(Identifier)，比如建表语句的表名或者字段名，以下我们具体看看什么是Hive中的Identifie...
Failed to recognize predicate 'xxx'. Failed rule: 'identifier' in column specification
落日小屋
06-14 1万+
1. 问题描述 在Hive1.2.2版本运行如下HQL时： select dt as date, comMap['searchType'] as search_type, comMap['clickType'] as click_type from search_click where dt = '20170614'; 会抛出如下异常： Failed to recognize pr
Hive Bug集锦
那又怎样？的博客
10-16 2260
1.安装hive后无法启动，报错如下[ERROR] Terminal initialization failed; falling back to unsupported java.lang.IncompatibleClassChangeError: Found class jline.原因是hadoop目录下存在老版本jline：/hadoop-2.6.5/share/hadoop/yarn/l...
hive值乘以0.01保留一位小数_Hive 0.13到Hive 2.1跨版本升级全姿势与避坑指南
weixin_39802519的博客
12-22 339
原标题：Hive 0.13到Hive 2.1跨版本升级全姿势与避坑指南Hive是业界大数据平台使用最广泛的SQL引擎，提供了一层SQL抽象接口和一套元数据规范， 将SQL查询翻译为分布式的计算作业，支持MapReduce/Spark/Tez等多种计算引擎。同时Hive定义的元数据标准已经成为了一种事实标准，业界流行的大数据SQL引擎均对Hive元数据进行了兼容和支持。前一段时间我们团队对Hive进...
hive regexp
最新发布
05-15
### Hive 中正则表达式 (`regexp`) 的使用及其相关问题解决方案 Hive 提供了丰富的字符串处理能力，其中包括基于正则表达式的匹配功能。以下是有关 `regexp` 的具体用法以及针对常见问题的解决办法。 #### 1. **`regexp` 的基本用法** 在 Hive 查询中，可以通过以下方式使用正则表达式进行模式匹配： - 判断某一列是否符合某个正则表达式模式。 ```sql SELECT * FROM table_name WHERE column REGEXP 'pattern'; ``` 例如，假设有一张表 `employees`，其中一列表示员工的名字 `employee_name`，我们希望筛选出名字以大写字母开头的所有记录，则可以这样编写查询语句： ```sql SELECT employee_name FROM employees WHERE employee_name REGEXP '^[A-Z].*'; ``` 这种形式允许直接将正则表达式作为条件的一部分参与 SQL 查询[^1]。 #### 2. **关键字冲突引发的问题及解决策略** 当试图在 Hive 查询中使用某些保留字（如 `REGEXP` 或者其他特殊名称）时可能会遇到语法错误。这是因为 Hive 将这些词识别成了内部的关键字而非普通的标识符。对此有几种可行的办法来规避此类情况的发生: - 方法 a: 对于引起歧义的关键字采用反引号 `` ` `` 转义的方式重新定义它们的作用域。例如如果原生调用失败的话可改为如下写法:`regexp`(column, regex_string)[^1]. - 方法 b: 修改原有函数调用的形式为更加贴近传统关系型数据库习惯的标准格式即把原本位置颠倒后的两个参数分别放置到运算符两侧:A regexp B 形式替代原来的函数风格调用[^1]. - 方法 c: 如果确认当前环境中不存在安全性考量的前提下还可以调整配置项关闭对于SQL标准严格遵循的要求从而避免不必要的麻烦:set hive.support.sql11.reserved.keywords=false;不过这种方法仅适用于临时测试环境不建议长期生产部署当中启用[^1]. #### 3. **关于 UDF 黑名单/白名单管理** 除了上述提到的操作之外还有一种情形涉及到用户自定义函数(UDFs)，特别是像 reflect 这样的敏感类库默认会被列入黑名单阻止正常使用除非显式解除限制。要实现这一点需要编辑核心站点属性文件(hive-site.xml): ```xml <property> <name>hive.server2.builtin.udf.blacklist</name> <value>empty_blacklist</value> </property> <property> <name>hive.server2.builtin.udf.whitelist</name> <value></value> </property> ``` 完成更改之后记得保存退出再重启服务端进程使得新设定能够立即生效因为这类改动无法单纯依靠动态指令(set xxx=yyy;)在线即时反映出来必须经过完整的启动流程才能加载最新的配置状态[^2]。 --- ### 示例代码片段展示 这里给出几个实用的小例子帮助理解上面讲解的内容： #### 模糊检索姓名字段中含有数字成分的数据行 ```sql SELECT name FROM users WHERE name REGEXP '[0-9]'; ``` #### 统计邮箱地址合法性的比例 ```sql SELECT COUNT(*) AS valid_emails_count FROM contacts WHERE email NOT REGEXP '^[_a-zA-Z0-9-\\.]+@[a-zA-Z0-9-]+\\.[a-zA-Z]{2,}$'; ``` #### 替换电话号码中的分隔符号为空格以便统一存储格式 虽然 Hive 自身并没有提供类似于 replace_all 的便捷接口但是借助 concat_ws 和 split 结合起来也可以达到相似效果: ```sql SELECT CONCAT_WS(' ', SPLIT(phone_number, '\\.|\\-')) as formatted_phone FROM customer_info; ``` ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

跳舞的皮埃尔

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值