Hive数据类型

最新推荐文章于 2024-01-21 09:38:12 发布
原创 最新推荐文章于 2024-01-21 09:38:12 发布 · 1k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hive

本文介绍了Hive的各种数据类型，包括基本数据类型如TINYINT、STRING和TIMESTAMP，以及集合数据类型如STRUCT、MAP和ARRAY。文章还详细讨论了Hive的数据类型转换，包括自动类型转换和手动强制转换，特别提到了隐式转换的规则和如何使用CAST函数进行转换。对于实际遇到的问题，如字符串数据排序错误，可以通过将字符串转换为INT类型来解决。

Hive基本数据类型

Hive支持的基本数据类型有:
TINKYINT
SMALLINT
INT
BIGINT
BOOLEAN
FLOAT
DOUBLE
STRING
TIMESTAMP

Hive集合数据类型

STRUCT
MAP
ARRAY

Hive数据类型转换

hive执行隐形转换，比如查询一张表的某个字段SMALLINT类型的数据，插入另一张表的INT类型的字段，那么这个过程是可以隐式转换的，不需要我们自己转换，但INT类型不能隐式转换程SMALLINT。即范围小的可以转换为范围大的。

Hive官方文档给出了隐式转换的规则：
在这里插入图片描述

Hive自动类型转换

参数hive.metastore.disallow.incompatible.col.type.changes默认为false，如果设置为true，则类型会按根据上表，如果转换类型是允许的，则数据会正常显示，否则显示为NULL。

Hive手动强制数据类型转换

通过CAST函数，可以实现类型转换。
今天之前遇到一种情况，数据类型定义的字符串，实际数据存储的是数字，排序的时候按这个字段排序，则用的是字符序列，因此就会造成9，81，7，34，这种排序结果。
这是通过CAST(‘column’ as ‘INT’)先转换为INT类型，再排序就可以得到正确结果。

注意： 浮点型数据转换为整型，用的是round()或者floor()实现

更多类型转换操作可以参考官方文档：https://cwiki.apache.org/confluence/display/Hive/LanguageManual+Types

Hive系列 (五)：Hive数据类型
Eric Ray的博客
08-24 2119
hive数据类型详解，简单数据类型及复杂数据类型array, map, struct, union 等
Hive数据类型、部分函数及关键字整理
无由的博客
09-28 2287
Hive数据类型、部分函数及关键字整理
Hive表字段类型转换错误解决：Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask.
qq_28658621的博客
04-05 2万+
Hive表字段类型转换错误解决——FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. Unable to alter table. The following columns have types incompatible with the existing columns in their respective positions :
JAVA int 强制类型转换错误提示（Cannot cast from Object to int）
Mr_zhang66的博客
03-06 900
stack.pop()返回类型是object的， 而object想要转换成整型，需要先转换为字符串类型，代码String.valueOf(stack.pop())； 然后将string类型变为整型。 int result =Integer.parseInt(String.valueOf(stack.pop()));
Cannot cast from Object to int 不能把对象转成int类型
crazywsp的博客
03-15 2153
int 换成包装类 integer 即可; 其它类型也是同样转为包装类即可。 eclipse 会报错，idea 就不会。 不改也不会影响运行 转载：https://blog.youkuaiyun.com/qq_38748251/article/details/79984129 ...
执行sql语句时 出现数据类型转换错误的问题
xinning1002的博客
02-28 5490
表合并时 提示转换类型发生错误
java-cannot cast from Object to int
weixin_46031140的博客
11-06 715
将（int）改成（Integer）问题解决。 int 换成包装类 integer 即可
hive数据类型共6页.pdf.zip
10-30
本资料“hive数据类型共6页.pdf”可能详细介绍了Hive中的各种数据类型及其使用方法。以下是关于Hive数据类型的详细解释： 1. **基本数据类型**： - **STRING**：用于存储字符串，可以包含字母、数字和特殊字符。 ...
快速学习-Hive 数据类型
01-07
第 3 章 Hive 数据类型 3.1 基本数据类型 对于 Hive 的 String 类型相当于数据库的 varchar 类型，该类型是一个可变的字符串，不过它不能声明其中最多能存储多少个字符，理论上它可以存储 2GB 的字符数。 3.2 集合...
Cannot cast from Double to Integer
W‘s Life
07-10 4951
尝试将Double强制转化为Integer时，总是出现无法将Double转化为Integer Double d=new Double(3.43); Integer i=(Integer)d; 最后发现可以先转化为基本类型，在转化： Double d=new Double(3.43); Integer i=(int)d.doubleValue(); 同理，对于Float，Long抓化为I
Java-基本运算符
qq_38959934的博客
03-22 254
运算符 public class Demo01 { public static void main(String[] args) { // 二元运算符 // Ctrl + D : 复制当前行到下一行 int a = 10; int b = 20; int c = 25; int d = 25; System.out.println(a+b); System.out.pr
Java 错误: “不兼容的类型: Object无法转换为int”
JZHowe's blog
01-08 3万+
今天在使用View的getTag()方法获取标签值的时候，需要强转成int类型，正常来说应该这样写：int position = (int) v.getTag();然而却会提示如下错误： Inconvertible types; cannot cast ‘java.lang.Object’ to ‘int’ 意思是说：“不兼容的类型: Object无法转换为int ”
解决java.lang.String cannot be cast to java.lang.Integer异常
热门推荐
ddzyx的博客
02-24 4万+
开发中经常会遇到java.lang.String cannot be cast to java.lang.Integer异常，记录下我怎么解决的。 这种异常就是经常会出现类型转换的地方，这里面有些小坑，必须要踩过，撸源码才知道问题原因，哈哈。 比如我在Double转String，Integer转String的过程中遇到的坑： Double.parseDouble()和Double.valueOf()方法的区别： parseDouble()方法得到的数据类型不能继续编译，因为这个方法得到的是 double ，
hive类型转化
shkstart的博客
11-04 1726
hive类型转化 Hive的原子数据类型是可以进行隐式转换的，类似于Java的类型转换，例如某表达式使用INT类型，TINYINT会 自动转换为INT类型，但是Hive不会进行反向转化，例如，某表达式使用TINYINT类型，INT不会自动转换为 TINYINT类型，它会返回错误，除非使用CAST操作。 1）隐式类型转换规则如下 （1）任何整数类型都可以隐式地转换为一个范围更广的类型，如TINYINT可以转换成INT，INT可以转换成BIGINT。 （2）所有整数类型、FLOAT和STRING类型都可以隐.
Hive之set参数大全-11
m0_49620121的博客
01-21 1496
这个参数的值通常是一个实现了特定接口的 Java 类，负责处理 Hive Metastore 中与文件系统交互相关的操作。主要用于本地模式运行的 Hive 任务，而对于在分布式模式下运行的任务，Hive 通常会使用 YARN（Yet Another Resource Negotiator）或其他资源管理器来分配内存，因此本地内存的设置可能不会直接生效。设置较大的最大容量可能有助于确保缓存能够容纳足够的元数据对象，提高性能，特别是在大型 Hive Metastore 中。
Datax MySQL2Hive抽数ClassCastException: java.lang.String cannot be cast to java.lang.Integer问题解决
欲望以提升热忱 毅力以磨平高山
04-10 3064
1、现象 com.alibaba.datax.common.exception.DataXException: Code:[HdfsWriter-04], Description:[您配置的文件在写入时出现IO异常.]. - java.lang.ClassCastException: java.lang.String cannot be cast to java.lang.Integer at ...
hive数据类型转换
weixin_34258078的博客
09-03 1297
博客地址：http://www.iteblog.com/文章标题：《Hive数据类型转换》本文链接：http://www.iteblog.com/archives/892Hadoop、Hive、Hbase、Flume等QQ交流群：138615359（已满），请加入新群：149892483本博客的微信公共帐号为：iteblog_hadoop，欢迎大家关注。如果你觉得本文对你有帮...
STM32 AD C单次转换模式 连续转换模式 扫描模式，AD7739的连续模式包含了STM32的扫描和连续两个模式。每个芯片的具体定义不同续根据据图芯片说明书理解
二进制模----细微行动改变影响世界
09-14 490
举例 用ADC1 规则通道的顺序为CH0,CH1,CH2,CH3， 不启动SCAN模式，在单次转换模式下： 启动ADC1，则 1.开始转换CH1（ADC_SQR的第一通道） 转换完成后停止，等待ADC的下一次启动，继续从第一步开始转换 不启动SCAN模式，在单次连续转换模式下： 启动ADC1，则 1.开始转换CH0（ADC_SQR的第一通道） 转换完成后回到第一步。 启动SCAN模式，在单次转换模式下： 启动ADC1，则 1.开始转换CH0、 2.转换完成后自动开始转换CH1 3
hive数据类型
最新发布
03-15
### Hive 数据类型概述 Hive 支持多种数据类型，这些数据类型可以分为 **原始数据类型** 和 **复杂数据类型**。以下是详细的分类及其用法： #### 原始数据类型 (Primitive Data Types) 1. **数值类型** - 整数类型：`TINYINT`, `SMALLINT`, `INT`, `BIGINT` 表示不同范围的整数[^2]。 - 小数类型：`FLOAT`, `DOUBLE`, `DECIMAL(precision, scale)` 用于表示浮点数和高精度小数。 2. **字符串类型** - 文本类型：`STRING`, `VARCHAR(length)`, `CHAR(length)` 用于存储字符数据。 3. **日期和时间类型** - 时间戳类型：`TIMESTAMP` 存储精确到毫秒的时间值。 - 日期类型：`DATE` 只存储年月日部分。 4. **布尔类型** - `BOOLEAN` 类型用于逻辑判断，取值为 `TRUE` 或 `FALSE`。 5. **二进制类型** - `BINARY` 用于存储字节序列数据。 --- #### 复杂数据类型 (Complex Data Types) 1. **数组 (ARRAY)** 数组是一种有序集合，允许重复元素。定义方式如下： ```sql ARRAY<element_type> ``` 插入和操作数组的例子： ```sql CREATE TABLE array_example (arr ARRAY<int>); INSERT INTO array_example VALUES (array(1, 2, 3)); SELECT arr FROM array_example; ``` 2. **映射 (MAP)** 映射是一个键值对集合，键必须唯一且不可为空。定义方式如下： ```sql MAP<key_type, value_type> ``` 示例代码： ```sql CREATE TABLE map_example (mymap MAP<string,int>); INSERT INTO map_example VALUES (map('a', 1, 'b', 2)); SELECT mymap['a'] FROM map_example; ``` 3. **结构体 (STRUCT)** 结构体是一组命名字段的组合，类似于对象模型中的类实例。定义方式如下： ```sql STRUCT<col_name : col_type [, ...]> ``` 示例代码： ```sql CREATE TABLE struct_example (mystruct STRUCT<a:int,b:string>); INSERT INTO struct_example VALUES (named_struct('a', 1, 'b', 'test')); SELECT mystruct.a FROM struct_example; ``` 4. **联合类型 (UNIONTYPE)** 联合类型允许多种可能的数据类型共存于同一列中，但在任何时刻只有一种类型有效。定义方式如下： ```sql UNIONTYPE<data_type1, data_type2, ..., data_typen> ``` 创建表并插入数据的示例： ```sql CREATE TABLE union_test ( foo UNIONTYPE<int, double, array<string>, struct<a:int,b:string>> ); -- 插入整数类型 INSERT INTO union_test VALUES (0:{1}); -- 插入双精度浮点数类型 INSERT INTO union_test VALUES (1:{1.5}); -- 插入数组类型 INSERT INTO union_test VALUES (2:{"apple", "banana"}); -- 插入结构体类型 INSERT INTO union_test VALUES (3:{'a':1,'b':'hello'}); ``` --- #### 类型转换 Hive 提供两种主要的类型转换机制： 1. **隐式转换** 在某些场景下，Hive 自动完成类型转换，例如在数学运算中将较小的整数类型提升为较大的整数或浮点类型[^3]。 2. **显式转换 (CAST 函数)** 当需要手动控制类型转换时，可使用 `CAST` 函数。语法如下： ```sql CAST(expression AS target_data_type) ``` 示例： ```sql SELECT CAST('123' AS INT); ``` --- ### 总结 Hive 的数据类型涵盖了常见的原始类型以及复杂的嵌套类型，能够满足多样化的数据分析需求。无论是简单的数值计算还是复杂的嵌套结构处理，Hive 都能提供灵活的支持。
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值