hiveserve1或者hiveserve2对表添加新字段后，desc显示表不存在

最新推荐文章于 2024-02-05 17:24:50 发布
原创 最新推荐文章于 2024-02-05 17:24:50 发布 · 988 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文讨论了在使用Hive时遇到的缓存问题，特别是当在hiveserver1上添加新字段后，hiveserver2下执行desc表操作时出现的Tablenotfound错误。解释了此现象的原因在于Hive的缓存机制，并提供了两个解决策略：修改hive-site配置项datanucleus.cache.level2.type为none和重启Hive服务器。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

环境 ：hive0.12.0;   hiveserver1和hiveserver2

引用：http://www.aboutyun.com/thread-12274-1-1.html


在hiveserver1上添加新的字段后hiveserver2

在hiveserver2 下desc 表的时候显示
Query returned non-zero code: 10001, cause: FAILED: SemanticException [Error 10001]: Table not found

在hiveserver2下添加新字段在hiveserver1下desc也出现相同的错误


原因是：hive的缓存

解决办法：

1.hive-site下的datanucleus.cache.level2.type将soft改成none

2.重启hive1，hive2


NL2SQL进阶系列(5)：论文解读业界前沿方案（DIN-SQL、C3-SQL、DAIL-SQL、SQL-PaLM）、新一代数据集BIRD-SQL解读
丨汀、的博客
04-15 2563
NL2SQL进阶系列(5)：论文解读业界前沿方案（DIN-SQL、C3-SQL、DAIL-SQL）、新一代数据集BIRD-SQL解读
怎么对hive建表，并上传hdfs？ FAILED: SemanticException [Error 10001]: Line 1:68 Table not found ‘t_user_order‘
2201_75806156的博客
11-17 992
由Facebook开源用于解决海量结构化日志的数据统计，后称为Apache Hive为一个开源项目。小编已经写了怎么安装hive，以及怎么连接可视化软件，这里用到的是DBeaver软件这篇文章的目的是怎么用hive对数据进行操作。
Hive 关于修改表结构其他客户端不同步的问题
hanhaixingchen的博客
05-31 1128
项目混用了多个HiveServer2 和 HiveCli。一段时间以后，出现了一个奇怪的问题。一个客户端修改了表结构以后，其他客户的访问的时候，却发现表结构并没有被同步修改。   查了不少资料，最后发现是因为HiveServer2 服务器开启了缓存的问题，记录如下：   问题出现原因是由于 L2 cache 这种缓存机制不支持分布式缓存。   关闭 L2 cache 后问题解决
hive分区表增加字段新增字段值为空的bug
热门推荐
men子烦高的烂笔头
11-20 1万+
关键字： hive, partition, add column hive JIRA：https://issues.apache.org/jira/browse/HIVE-6131  最近在查hive版本问题，发现在hive1.1.0和hive1.2.1上，分区表新增字段后新增字段值为空的情况。 网上查了资料，提供了两种解决办法： 1. 修改hive元数据SDS表的CD_ID字段，
hive增加字段后对应字段hive查不出来
summer089089的博客
12-29 2042
1.增加字段后直接查看文件有值，但是hsq查出来就没有值，但是impala查询是有值的 hive建表语句 CREATE EXTERNAL TABLE nretail_ability_order.retail_report ( sub_order_no STRING COMMENT '订单号', order_source STRING COMMENT '订单来源:1.T销客 2.方舟 3.方舟移动端 8.T云店', company_name STRING COMMENT '开单客户商务中心', custome
解决hive表新增的字段查询为空null问题
qq_50231389的博客
02-05 1503
这是怎么回事，怀疑是不是数据没有插入成功，于是查看日志确实是写入成功了，后换了impala和presto 两种引擎查询，发现两个结果都有值，如果直接到目录下查看数据文件会发现确实有值。第二种方案，要是我们表里有很多分区，这样处理就显得有些繁琐了，不知有没有更优雅的处理方式，答案是肯定的，那就是在修改列时加上cascade。经排查，这是hive 的bug，用Hive版本比较低，会出现这个问题。新增字段，然后向已存在分区中插入数据，以为问题就解决了。其中dt为分区，往学生表新增一个分区，并插入记录测试。
HiveServer
09-21 100
HiveServer HiveServer - Apache Hive - Apache Software Foundation HiveServerSkip to end of metadata Page restrictions apply Adde...
【mysql 数据库】05 数据库中对表的操作命令（不建议修改表结构）
12-14
`会显示`student`表的所有字段信息，包括字段名、类型、是否可空等。 **查看建表语句**，`SHOW CREATE TABLE 表名;`命令非常实用，它会输出创建指定表时使用的原始SQL语句，便于复制或参考，如`SHOW CREATE TABLE ...
MySql创建带解释的表及给表和字段加注释的实现代码
09-09
在MySQL数据库管理中，对表和字段添加注释是一种良好的编程习惯，有助于提高代码的可读性和维护性。本文将详细介绍如何在MySQL中创建带有解释的表，以及如何为已存在的表和字段添加注释。 1. **创建带解释的表** ...
对表的操作命令
m0_51779342的博客
03-14 2324
一、创建表格 Create table 表名（ 字段名（就是列名） 数据类型（长度） 约束条件（可省略） comment “注释”， 字段名（就是列名） 数据类型（长度） 约束条件（可省略） ）； 注意： 创建表时在小括号后面要加上分号 字段与字段中间用逗号隔开，最好一个字段不要加逗号（参考java参数格式） 如果定义为字符串类型的字段，后面要规定字符串长度 如果不指定长度，则使用默认值，如int类型默认长度11 二、数据类型 一、数值类型 类型 大小 描述 tinyint
帮我写个sql，数据库是oracle，需求是表A left join 表B，关联条件是表A.字段1=表B.字段1 and 表A.日期=表B.日期，若表A日期字段有202506，表B日期字段中没有202506，则用表B日期字段小于202506最大值匹配表A日期字段的202506；表A测试数据（字段1 字段2 字段3 日期 字段5 字段6 100000002 1000 Z01 202507 M 2981.53 100000002 1000 Z01 202506 M 2981.63 100000002 1000 Z01 202505 M 2981.75 100000002 1000 Z01 202504 M 2599.05 100000002 1000 Z01 202501 M 1875.42 ）表B测试数据（字段1 字段2 字段3 日期 字段5 字段6 100000002 1000 Z01 202507 M 2981.53 100000002 1000 Z01 202505 M 2981.75 100000002 1000 Z01 202501 M 1875.42 ）
最新发布
07-29
但是，如果表B中根本没有相同字段1的记录，那么连接后b的所有字段都是NULL，然后我们按rn=1取，也会保留（因为左连接，即使没有匹配，表A的记录也会保留，此时b的字段都是NULL，而rn的排序中，由于b的日期为NULL，...
字段是否存在,不存在就新增
moqing的专栏
03-03 944
IF Not Exists( SELECT TableName = OBJECT_NAME(c.object_id), ColumnsName = c.name, Description = ex.value, ColumnType=t.name, Length=c.max_length FROM sys.columns c LEFT OUTER JOIN sys.extended...
解决Hive使用desc显示中文注释乱码
weixin_33877885的博客
05-12 1289
Hive数据库原生不支持中文注释的显示，使用desc命令，如果有中文就会显示乱码。解决方法如下 修改MySQL中的metadata 进入mysql ，查看hive 数据库当前编码 show create database hive ; 复制代码如果是utf8 则执行下面sql将 hive 数据库默认编码改成 latin1 alter database hive default character ...
@value 乱码_解决hive的表字段comment中文乱码问题
weixin_39946029的博客
11-23 131
1.hive (gmall)> desc dws_uv_detail_day;发现字段comment乱码：2.登录mysql, 3.进入mysql中hive的元数据库mysql>use metastore;mysql>show create table COLUMNS_V2; --查看字符集4.修改字符集为utf-8#修改表字段注解和表注解 5.进入hive的配置文件hive...
Hive创建表的几种方式
Angelababy_huan的博客
11-05 7397
hive执行的三种方式：     1. 用hive CLI     2. 终端执行hive命令： hive -e hive语句     3. 终端执行hive脚本： hive -f  hive脚本     如果需要通过jdbc来连接hive，需要在终端开启hiveserver2服务 nohup hive --service hiveserver2 & netstat -ntpl | g
Hive(二)——数据查询等
zhuzi51的专栏
10-15 996
楔子 学习了解hive hive常用交互命令 [root@hadoop102 ~]# hive -help usage: hive -d,--define <key=value> Variable subsitution to apply to hive commands. e.g. -d A=...
Hadoop
weixin:tchongyu
10-17 411
HDFS处理流程 NameNode是主节点，存储文件的元数据如文件名，文件目录结构，文件属性（生成时间,副本数,文件权限），以及每个文件的块列表和块所在DataNode等。 DataNode 在本地文件系统存储文件块数据，以及块数据的校验和。 Secondary NameNode 用来监控HDFS状态的辅助后台程序，每隔一段时间获取HDFS元数据的快照。 HDFSClient 客...
hive分区表增加字段会导致新增字段无法显示值的BUG
xiao_jun_0820的专栏
05-07 1万+
对hive分区表新增字段后，在执行插入分区的动作，会发现其实数据文件中已经有新字段值了，但是在查询的时候新字段的值还是显示为null。 比如我们做一个简单的问题重现 我们先创建一个分区表xj_test1,往分区dt=201501中插入一条数据： create table xj_test1(a string,b string) partitioned by ( dt string) row
Hive中常出现的错误(不定时更新)
小健的博客
11-23 9013
1.加载数据失败 hive> load data local inpath '/home/user/hive.txt' into table studentl > ; FAILED: SemanticException [Error 10001]: Line 1:56 Table not found 'studentl' hive> load data local inpath '/ho
desc字段是什么意思
03-18
需要注意的是，在编程环境中（如某些脚本语言或框架），可能会存在名为 desc 的变量或者参数，但这完全取决于具体的应用场景和开发者的设计意图，不应将其与 SQL 中的 DESC 混淆。 另外，虽然未直接提及于所提供的...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值