误删hive表如何恢复

最新推荐文章于 2024-10-14 18:46:55 发布
最新推荐文章于 2024-10-14 18:46:55 发布
阅读量2.4k 收藏 1
点赞数
分类专栏： # hive 大数据相关 文章标签： hive hdfs
版权所有，转载请注明原文链接。 文中有不妥或者错误的地方还望指出，以免误人子弟。如果觉得本文对你有所帮助不妨【推荐】一下！如果你有更好的建议，可以给我留言讨论，共同进步！ 再次感谢您耐心的读完本篇文章。
本文链接：https://blog.youkuaiyun.com/lz6363/article/details/123977881
版权

CDH环境,已配置回收站,配置回收站默认日期保存为一天

失误将hive表数据删除,删除的数据移动到了回收站中,位于

/user/hive/.Trash/删除日期XXX/hive/warehouse数据库名.db/表名


先查看表名文件中是否是删除的表

hdfs dfs -ls /user/hive/.Trash/Currerrt/user/hive/warehouse/数据库据库名.db | grep 表名

对于有分区的表,额外执行

msck repair table 数据库.表名

对于该表有权限管理,需要进行重新赋权

hive表被误删后如何恢复？
11-01 4414
1、首先去垃圾箱找到被删除的表数据 hadoop fs -du -h /user/用户名/.Trash/Current/user/用户名/warehouse; 2、把数据copy到原始的文件夹 hadoop fs -cp 垃圾箱/表名 原始文件夹/表名 3、修复分区 MSCK REPAIR TABLE 表名 4、验证数据 select * from 表名 limit 100; ......
hive误删数据表恢复
Ysuzuran的博客
09-10 3276
数据被update后想要找回原先的数据只知道HBASE可以通过回退版本号查找，oracle数据库可以基于时间查询as of timestamp语句的办法进行恢复数据，MySQL可以在MySQL server开启了binlog的情况下通过binlog2sql快速回滚（该方法适用于dml，不适用于DDL，如果是drop了一张大表，必须要在执行DDL前先备份老数据才能实现回滚），其他数据库遇到这种问题好像不能回退，但是好像可以通过数据库日志进行处理，具体怎么处理还在了解中。。。。。 如果hive里误删的数据表，恢
Hive恢复误删数据表
dymkkj的专栏
06-28 1129
Hive恢复误删数据表
Hadoop之hive的drop table恢复
感谢你的关注~~~~ღ( ´･ᴗ･` )
08-16 1120
一、恢复过程： 　　在之前我有对hadoop的回收站有过了解，就是将hdfs dfs -rm删除掉的文件进行恢复，只需要hdfs dfs -mv将文件从回收站中搬过来就行，我就先使用这个方法，但是效果不佳，执行select count(*) from table_name，得到的结果为0。这个时候我想到这个表被drop掉以后在mysql的元数据库中已经没有数据了，那就得需要将这些数据的信息重新写...
Hive：从HDFS回收站恢复被删的表
大数据知识梳理
11-30 851
Hive：从HDFS回收站恢复被删的表
小白篇(十八)：恢复Hive误删的表数据
belialxing的专栏
11-09 2898
我的原文地址： https://mp.weixin.qq.com/s?__biz=MzIxMzg5NzI4OQ==&tempkey=MTA4Nl9kOUdETjQzYnN4bHlENm5ybndmR2lYX2ZNanlYQ1VrM2VjbFVDN2VhZS0xMDBUZXVHNVVPLVg0THRYTEhKZEVXb0ZYX2dRU2RRdmVDbjJfYmNXTkxjUzA3RXVXeFpzQm81eTYxXzFxX3duVUlkdmJ0SlVka0RpZHVWSGVuZEtNejAwQTdmX
hive误删表，数据恢复
mACID_lys的博客
02-16 2572
本文删除的表时hive的分区表，parquet格式snappy压缩。有分桶 首先你要知道你的hdfs回收站是否开启 找到你的回收站里的刚才删除的hive表数据的文件，前提是你的表示drop的，而不是truncate的，truncate的表数据我暂时不知道能不能恢复 我们hive表删除的数据是在 标记1 的这个文件里（Current）这个需要看你的配置和个人的登陆服务器情况，但是一定不会在标记2这里 新建原表 CREATE TABLE `hive_na
hive表或分区被误删了怎么找回？
weixin_38554502的博客
07-10 1845
hive表或分区被误删了怎么找回？ 在平常工作中，因为这样那样的原因表数据被误删了，这个时候要怎么找回呢？ 先记一下昨天刚发生过的问题。 线上数据因为之前的误操作存在一些脏分区，比如像这样的： 这种异常分区比较多，手动删除用alter table dw_dim.dim_shop_d_his drop partition(dt=‘2018-06-04’) 太多了，比较费劲。这个时候就考虑写个脚本批量删除，结果判断是否为脏分区的状态值设大了，导致正常数据被误删了好多。（这个时候就提醒我们在做线上操作的时候一定要
快捷删除hive表的工具
08-24
- **安全性**：可能包含备份和恢复功能，以防误删。 在使用这个名为DeleteHiveTable的压缩包时，用户需要解压文件，然后按照文档指示配置和运行工具。这通常涉及设置Hive的连接参数，指定要删除的表的条件，以及...
hive 误删表恢复
sunghosts的专栏
10-14 578
hive表分内部表和外部表，误删（drop）后，其恢复逻辑是不同的。
误删除表的恢复方法
蘑菇丁的专栏
04-12 1066
1、使用逻辑备份恢复（有数据丢失） 2、flush table tname to before drop(在回收站里有此表才可以恢复) drop表时；drop table t purge;不能用闪回恢复 3、闪回数据库flashback database 得不偿失（生成库不用此方法） 4、用点时间的不完全恢复 1)首先查看下归档日志 select name from v$archived
大数据初学者问题汇总之恢复已删除的hive表数据
chengzixiannv的博客
04-06 791
如果不小心误删了hive某一个分区表怎么办？ 如果hdfs上也删了呢？
hive drop表恢复手册
cnheasy
01-10 713
前言 语法:DROP TABLE [IF EXISTS] table_name [PURGE]; -- (Note: PURGE available in Hive 0.14.0 and later) 删除此表的元数据和数据。如果配置了Trash (没有指定 PURGE)，数据实际上会移动到 .Trash/Current 目录。元数据完全丢失。 删除外部表时，表中的数据不会从文件系统中删除。 当删除视图引用的表时，不会给出警告(视图关联表被删除视为无效，必须由用户删除或重新创建)。
Hive表drop删除表后恢复表的分区数据
攻城狮Kevin
10-28 3793
如果HDFS配置好回收站的话，drop删除表后可以通过命令恢复表数据， 例如回收站HDFS路径如下： /user/hdp_teu_dpd/.Trash/Current/ 表的HDFS路径如下： /home/hdp_teu_dpd/warehouse/wbdb.db/dw_smart_merge_idmapping/ 当drop tabledw_smart_merge_idmappi...
当数仓中表被误删
激进的蜗牛
08-21 359
实际工作中，误删表虽然是小概率时间，但同时也是不可避免又最不想发生的事了。那么，万一误删了如何处理呢。 1-表还在，数据被误删了 2-哎，都没了 第一种情况 a-从HDFS的回收站中将数据重新拷贝到表格中 hdfs dfs -cp /user/USER_NAME/.Trash/user/hive/warehouse/db_name.db/table_name /user/hive/.... b-执行加载数据命令 load data inpath 'path...' into tabl.
Hive误删除后，如何恢复数据
Top5软件工程硕士，先后在京东、字节从事多年Java后端开发、实时和离线大数据开发
11-19 3664
原始数据:dfs -ls ns1/abc/sdk； ........... ........ns1/abc/sdk/2019-01-01 ........ns1/abc/sdk/2019-01-02 ........ns1/abc/sdk/2019-01-03 ........... 1 误删除：dfs -rm -r ns1/abc/sdk ，执行后，有提示 ns1/abc/sdk...
truncate误删数据恢复hive
最新发布
02-12
### Hive 中 Truncate 命令误删除数据后的恢复方法 对于通过 `TRUNCATE` 命令清空的 Hive 表，由于该命令会直接清除表中的所有数据而不会移动到回收站，因此常规情况下这些数据无法像 DROP 的表那样容易恢复[^1]。 然而，在某些特定条件下仍有可能尝试恢复： #### 尝试从 HDFS 日志中查找残留数据 虽然 `TRUNCATE` 不会将旧版本的数据放入垃圾箱，但在极少数情况下，部分未及时清理的日志文件可能还保存着被截断之前的数据副本。这取决于具体集群配置以及日志保留策略[^4]。 ```bash hdfs dfs -ls /path/to/table/directory/_logs/ ``` 请注意上述路径需替换为实际存储位置，并且这种方法成功率较低。 #### 利用备份机制 如果所在环境启用了自动定期全量或增量备份，则可以从最近一次完整的备份集中提取丢失的信息并重新导入至当前数据库实例内[^2]。 #### 数据库快照功能（适用于支持此特性的发行版） 一些企业级大数据平台提供了更高级别的保护措施如时间点恢复(PITR)，允许管理员回滚到指定历史时刻的状态从而挽救意外损失的内容[^3]。 尽管存在以上几种理论上的解决方案，但针对由 TRUNCATE 导致的数据遗失情况而言，最有效的预防手段始终在于事前准备——即建立完善的事先防范体系，包括但不限于启用事务管理、设置合理的权限控制政策等。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值