HDFS 的Trash回收站功能的配置、使用

最新推荐文章于 2024-06-26 14:10:05 发布
最新推荐文章于 2024-06-26 14:10:05 发布
阅读量1k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： hadoop分布式计算解决方案集锦
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/wenyusuran/article/details/25904695
HDFS的Trash功能类似于Linux的回收站，每个用户有一个/.Trash/目录用于存储被删除的文件，这些文件在一定时间后会被自动删除。用户可以在此期间恢复文件。配置项包括文件在回收站的保留时间，NameNode通过后台线程进行清理。当使用HDFS API删除文件时，需要自行实现回收站逻辑。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

文件的删除和恢复 

       和Linux系统的回收站设计一样，HDFS会为每一个用户创建一个回收站目录：/user/用户名/.Trash/，每一个被用户通过Shell删除的文件/目录，在系统回收站中都一个周期，也就是当系统回收站中的文件/目录在一段时间之后没有被用户回复的话，HDFS就会自动的把这个文件/目录彻底删除，之后，用户就永远也找不回这个文件/目录了。在HDFS内部的具体实现就是在NameNode中开启了一个后台线程Emptier，这个线程

了解本专栏 订阅专栏 解锁全文
hdfs垃圾回收
九师兄
12-28 1089
回收站简介： 在HDFS里，删除文件时，不会真正的删除，其实是放入回收站/trash，回收站里的文件可以快速恢复。 可以设置一个时间阀值，当回收站里文件的存放时间超过这个阀值或是回收站被清空时，文件才会被彻底删除，并且释放占用的数据块。 实例： Hadoop的回收站trash功能默认是关闭的，所以需要在core-site.xml中手动开启。 1、修改core-site.xml，增加： <pr...
Hadoop HDFS Trash 回收站使用指南
热门推荐
SmartSi
12-22 1万+
我们在删除一个文件时，遇到如下问题，提示我们不能删除文件放回回收站:sudo -uxiaosi hadoop fs -rm -r tmp/data_group/test/employee/employee_salary.txt17/12/06 16:34:48 INFO fs.TrashPolicyDefault: Namenode trash configuration: Deletion in...
hdfs设置回收站
龙神add-走向数据架构师的路
07-14 664
hdfs通过设置trash回收站来恢复误删文件
HDFS之垃圾回收箱配置及使用
csdn3993023的博客
05-23 284
HDFS为每个用户创建一个回收站: 目录:/user/用户/.Trash/Current 系统回收站都有一个周期,周期过后hdfs会彻底删除清空,周期内可以恢复 1.HDFS删除文件,无法恢复 [hadoop@had...
转：HDFS研究----.Trash文件
06-03 1066
删除文件示例 与Linux下的rm命令不同，我们在删除HDFS文件时，都会有将该文件移动到回收站的提示，如下， hdfs@lyhadoop5:~$ hadoop fs -rm /user/hdfs/generic 16/10/18 16:49:50 INFO fs.TrashPolicyDefault: Moved: 'hdfs://lyhadoop5:8020/user/hdfs/test....
HDFS的Trash回收站功能的配置和使用
07-02
HDFS是Hadoop分布式计算的存储基础。HDFS具有高容错性，可以部署在通用硬件设备上，适合数据密集型应用，并且提供对数据读写的高吞 吐量。HDFS能 够提供对数据的可扩展访问，通过简单地往集群里添加节点就可以解决...
HDFS Trash回收机制详解与配置实践
"12、HDFS Trash垃圾桶回收介绍与示例，详细讲解了HDFS的回收站机制，包括Trash的启用、配置以及验证过程。" 在分布式文件系统HDFS（Hadoop Distributed File System）中，数据的安全性是至关重要的。当用户误删...
hdfs Trash回收站配置 java操作trash不生效解决
cfjs790118的博客
07-14 869
Trash trash位于org.apache.hadoop.fs包中，通过传入fs和conf创建 public Trash(FileSystem fs, Configuration conf) throws IOException { super(conf); this.trashPolicy = TrashPolicy.getInstance(conf, fs, fs.getHomeDirectory()); } trash是hdfs中的回收站功能，可以将误删和需要找回
HDFS垃圾回收站配置及使用
csp75739的博客
05-25 792
HDFS会为每一个用户创建一个回收站目录：/user/用户名/.Trash/， 每一个被用户通过Shell删除的文件/目录，在系统回收站中都一个周期，也就是当系统回收站中的文件/目录在一段时间之后没有被用户恢复的话，HDFS就...
HDFS的Trash回收站功能
开发小盆友的博客
05-31 549
文件的删除和恢复 和Linux系统的回收站设计一样，HDFS会为每一个用户创建一个回收站目录：/user/用户名/.Trash/，每一个被用户通过Shell删除的文件/目录，在系统回收站中都一个周期，也就是当系统回收站中的文件/目录在一段时间之后没有被用户恢复的话，HDFS就会自动的把这个文件/目录彻底删除，之后，用户就永远也找不回这个文件/目录了。在HDFS内部的具体实现就是在NameNode中开启了一个后台线程Emptier，这个线程专门管理和监控系统回收站下面的所有文件/目录，对于已经超...
将误删hdfs文件恢复
LZX的博客
01-27 378
ambari 默认将hdfs删除数据保存至回收站6小时 到hdfs 目录/user/hdfs/.Trash 查看所删文件 hadoop dfs -mv /user/hdfs/Trash/xxx(被删文件位置) /xxx(想要恢复的位置)
hadoop 文件存放策略_Hdfs磁盘存储策略和预留空间配置
weixin_34275305的博客
12-23 1015
一、Hdfs磁盘存储策略1、 指定本地目录存储策略data目录为Hot策略对应DISK；data1目录为Cold策略对应ARCHIVE；dfs.datanode.data.dir[DISK]/opt/beh/data/namenode/dfs/data,[ARCHIVE]/opt/beh/data/namenode/dfs/data1重启hdfs$ stop-dfs.sh$ start-dfs.s...
Hadoop之HDFS的回收站
郭龙飞的学习博客
02-21 4427
回收站的概念 我们windows系统里面有一个回收站，当想恢复删除的文件的话就可以到这里面进行恢复，HDFS也有回收站。 HDFS会为每一个用户创建一个回收站目录：/user/用户名/.Trash/，每一个被用户在Shell命令行删除的文件或者目录，会进入到对应的回收站目录中，在回收站中的数据都有一个生存周期，也就是当回收站中的文件或者目录在一段时间之内没有被用户恢复的话，HDFS就会自动的把这个文件或者目录彻底删除，自动删除之后用户就永远也找不回这个文件或者目录了。 默认情况下hdfs的回收站是没有开启的
HDFS磁盘清理维护
蜀门嗯哼的博客
03-09 2766
HDFS磁盘查看清理
HDFD 回收站【Trash】机制
Markble
04-03 1960
HDFS Trashji机制知识总结
Hadoop 教程 - Hadoop HDFS Trash垃圾回收详解
最新发布
qq_33240556的博客
06-26 1064
Hadoop HDFS的Trash（回收站）机制是为了防止误删重要文件而设计的，它允许用户在文件被永久删除之前有机会恢复。
【Hadoop】HDFS回收站与安全模式
ccql's Blog
01-24 706
HDFS在core-site.xml中进行配置后，会为每一个用户在“/user/用户名/.Trash/”地址创建一个回收站目录，每个被用户使用Shell命令行删除的文件或者目录，都会被移动到回收站目录中。但如果一直保存而不清空回收站目录的话，注定会出现问题，因此回收站中的数据都有一个生存周期，也就是当回收站中的文件或者目录在一段时间之内没有被用户恢复的话，HDFS就会自动的把这个文件或者目录彻底删除。注意：默认情况下HDFS的回收站是没有开启的，需要通过修改core-site.xml配置文件来开启。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

文宇肃然

精神和物质鼓励你选一个吧

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值