Hive如何drop删除外部表，如何恢复表中数据

最新推荐文章于 2023-09-05 19:42:13 发布
原创 最新推荐文章于 2023-09-05 19:42:13 发布 · 2.1k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

1.创建以前的表结构
2.恢复数据：MSCK REPAIR TABLE networkqualityinfo;

HIVE外部表删除重建指定HDFS目录后查询不到数据
数据库
05-22 4559
HIVE外部表删除重建指定HDFS目录后查询不到数据，怎么办 删除了外部表，没有删除hdfs文件 重建了外部表又关联到之前的hdfs目录之后，select查询却没有数据 需要MSCK REPAIR TABLE+tablename，之后查询，数据就回来了。 MSCK REPAIR TABLE命令是做啥的 MSCK REPAIR TABLE命令主要是用来解决通过hdfs dfs -put或者hdfs api写入hive分区表的数据在hive中无法被查询到的问题。 hive有个服务叫metastore，
Hive讲课笔记：内部表与外部表
howard2005的专栏
12-28 1863
Apache Hive作为大数据处理的重要工具，其内部表与外部表是两种核心的数据存储和管理机制。内部表由Hive全权管理，数据存储在HDFS特定目录下，删除时会连同元数据及HDFS数据一同删除；创建过程包括定义表结构、插入数据等步骤，并且完全依赖于Hive系统。
【Hive】drop table需注意外部表
littlemichelle
09-05 1046
ALTER TABLE tb_nameSET TBLPROPERTIES('EXTERNAL' = 'FALSE');
oracle删除外部表数据,Oracle外部表的一次维护
weixin_42350755的博客
04-08 324
在做Oracle数据库的导出导入操作的时候，发现在将导出数据导入到新库过程中报告如下错误：在查看数据库中关于外部表的视图中相关信息：select * from dba_directoriesSelect * from select * from dba_external_tables发现EXP_USERID表存在而目录EX_DATA不存在了！正常的情况下是先创建一个目录在创建外部表，现在是目录丢失...
hive删除原外部表，新建新表，同步元数据
lukabruce的博客
01-15 1525
#删除已存在的表 drop table if exists user_data; #新建表 create external table if not exists user_data( user_id string, name string, age int )PARTITIONED BY(ds string) CLUSTERED BY (user_id) INTO 10 BUCKETS R...
删除表操作——drop、truncate和delete用法详解
热门推荐
杜小白的博客
08-13 2万+
一、基本语法    1、drop table 表名称                         eg: drop table  test;  --test为表名，下同    2、truncate table 表名称                     eg: truncate  table test;                     3、delete from 表名称 wher...
Hive内部表和外部表
01-07
删除表时(drop table)内部表会删除hdfs对应路径，而外部表不会删除hdfs对应的路径, 删除表无论是内部表和外部表都会删除元数据(metastore.TBLS、metastore.COLUMNS_V2) 二：location关键字 用于指定hdfs路径，如果不...
小白篇(十八)：恢复Hive误删的表数据
belialxing的专栏
11-09 2959
我的原文地址： https://mp.weixin.qq.com/s?__biz=MzIxMzg5NzI4OQ==&tempkey=MTA4Nl9kOUdETjQzYnN4bHlENm5ybndmR2lYX2ZNanlYQ1VrM2VjbFVDN2VhZS0xMDBUZXVHNVVPLVg0THRYTEhKZEVXb0ZYX2dRU2RRdmVDbjJfYmNXTkxjUzA3RXVXeFpzQm81eTYxXzFxX3duVUlkdmJ0SlVka0RpZHVWSGVuZEtNejAwQTdmX
【大数据Hive】Hive 内部表与外部表使用详解
congge_study的博客
07-15 6301
Hive 内部表与外部表使用详解
hive内部表外部表的挂载数据、删除数据及修改原数据
CodingWithGakki
09-29 1492
标题hive内部表外部表的挂载数据、删除数据及修改原数据 各种细节,一一帮你踩坑 原数据 1700 Beijing 1800 London 1900 Tokyo 建立外部表： create external table student id int name strin )row format delimited fields terminated by ' ' 加载本地数据： load data local inpath '/root/data/student.txt' into table st
快捷删除hive表的工具
08-24
1.可根据数据库表名批量删除； 2.封装了自定义方法，可根据表明中任意一字段（或多个字段）作为key批量删除 3.解决了权限不足等问题造成的删表不彻底等问题 4.程序为java编写
清空表数据和删除表truncate、delete、drop
HONG321的专栏
05-03 1564
TRUNCATE TABLE 在功能上与不带 WHERE 子句的 DELETE 语句相同：二者均删除表中的全部行。但 TRUNCATE TABLE 比 DELETE 速度快，且使用的系统和事务日志资源少。 DELETE 语句每次删除一行，并在事务日志中为所删除的每行记录一项。 TRUNCATE TABLE 通过释放存储表数据所用的数据页来删除数据，并且只在事务日志中记录页的释放。 TRU
hive外部表删除
eli的博客
01-14 6745
hive外部表删除遇到的一个坑 操作步骤 创建某个表（create external table xxx location xxx） 插入数据(insert xxx select xxx from xxx) 删除表（drop table xxx） 重新创建 插入数据 查询数据 现象 查询数据发现部分第一次插入的数据 查询数据量发现大于第二次插入的数量 原因 与其说是坑，不如说是自己忽略了一点： 插入的是外部表，当drop表之后，数据并没有删除 第二次创建表location指向的还是原
hive表的drop、use、show等工作常用用法
鹿鸣悠悠
01-18 3642
hive表的drop、use、show等常用语法的意思1、use 表示用tagtest1029的库2、show查看有哪些数据库3、drop 表示删除这个表 一、工作中用到最多开头 use tagtest1029; show databases; 再insert或者select 备注：hive本来就是做新增和查询操作的，所以新增和查询语法用的多 1、use 表示用tagtest1029的库 use tagtest1029; 表示用tagtest1029的库 2、show查看有哪些数据库 一般用法 use
hive清空外部表的三种方式
lixiaoksi的博客
06-23 1万+
本文总结hive中清空外部表的三种方式 hive版本：2.1.1 环境准备 新建一张外部表： create external table test_external(name String,age int,sex String) stored as orc; 插入数据： insert into table test_externalvalues("johnson",18,"男"); 查看数据： 如果此时使用truncate 命令的话，会抛出错误信息FAILED: Semantic...
Hive操作——删除表(drop、truncate)
AcceptedLin的博客
05-18 1万+
Hive操作——删除表(drop、truncate) Hive删除操作主要分为几大类：删除数据（保留表）、删除库表、删除分区。我将以下图为例清空iot_devicelocation中的数据，之后再删除表、库等。 首先来看一下iot_deivcelocation中的数据。 select * fromiot_deivcelocation 一、仅删除表中数据，保留表结构 hive> truncate table iot_devicelo...
Hive内部表&外部表详解
baidu_41805096的博客
06-03 4166
内部表(managed table): 未被external修饰的表，也叫管理表。 外部表(external table):被external修饰的表。 内部表&外部表的区别： 内部表：删除表会删除表的元数据(metadata)和表数据（data）。 外部表：删除表会删除表的元数据(metadata)，但不会删除表数据（data）。 数据管理方式： 数据(data)都存储在HDFS上，内部表由Hive自身管理，外部表数据由HDFS管理； 元数据(metadata)都存储在mysql上，由mysql管
转载：hive清空外部表的三种方式
黄道婆的专栏
10-03 3482
原始链接：https://blog.youkuaiyun.com/lixiaoksi/article/details/106919895 hive清空外部表的三种方式 本文总结hive中清空外部表的三种方式 hive版本：2.1.1 环境准备 新建一张外部表： create external table test_external(name String,age int,sex String) stored as orc; 插入数据： insert into table test_...
hive 外部表删除数据
最新发布
07-20
在 Hive 中，外部表（External Table）的设计特点是仅存储表的元数据定义，而实际数据存储在外部存储系统中（如 HDFS）。因此，直接删除外部表的数据不会像管理内部表（Managed Table）那样自动清除底层数据[^1]。 要删除 Hive 外部表中的数据，需采取以下方法之一或组合使用： ### 删除外部表的元数据 如果仅需要移除表的定义，而不删除底层数据，可以使用 `DROP TABLE` 语句： ```sql DROP TABLE IF EXISTS external_table_name; ``` 此操作仅删除 Hive 中的表定义，原始数据仍然保留在其存储位置[^1]。 ### 手动删除底层数据 由于外部表的数据不由 Hive 管理，因此需要手动从存储系统中删除数据。例如，如果数据存储在 HDFS 上，可以使用以下命令： ```bash hadoop fs -rm -r /path/to/external/table/data ``` ### 清空外部表数据（保留元数据） 若希望清空外部表的数据但仍保留其定义，可以采用以下方法： 1. **重命名外部表并重建**： - 首先重命名原表： ```sql ALTER TABLE external_table_name RENAME TO external_table_name_old; ``` - 然后创建一个空的外部表： ```sql CREATE EXTERNAL TABLE external_table_name ( column1 STRING, column2 INT ) LOCATION '/path/to/new/data/location/'; ``` 2. **使用分区表**（如果适用）： - 如果外部表是分区表，可以删除特定分区数据： ```sql ALTER TABLE external_table_name DROP IF EXISTS PARTITION (partition_column='value'); ``` - 此操作会删除对应的元数据，但底层 HDFS 数据仍需手动清理[^1]。 ### 使用 Hive ACID 事务（需启用事务支持） 如果 Hive 环境支持 ACID 事务（Hive 0.14+），可以将外部表设置为事务表，并使用 `DELETE` 语句： ```sql DELETE FROM TABLE external_table_name WHERE condition; ``` 此方法要求 Hive 表和文件格式支持事务性操作，并且底层存储系统需兼容 ACID 语义。 ##
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值