GlusterFS 文件系统的清理

项目需按文件ID截取存放图片文件,后期存储快满时要清理3个月前文件。按ID清理效率低,网上无好方法。最终通过find按创建时间删文件,再进入glusterfs节点的.glusterfs文件夹批量删特定文件两步释放空间,可将其设为定时任务。

由于项目的坑,需要将文件按照文件ID名字截取存放对应的文件夹路径下 (00/00/,0a/00/),这样后台系统可以根据ID自动拼接文件地址进行访问。

但是由于存储的都是图片文件比较小,且量也比较大

在后期存储快满的时候,进行文件清理 (移除3个月前的文件图片)。然后问题来了 由于存图片的规则是按ID截取规则存的,

所以清理的时候坑就来了。如果按照ID去一个个清理效率会非常低下释放的还跟不上增长的。

网上也没有找到特别好的清理方法,最后只能通过两个步骤进行释放勉强

一 、 find 根据文件的创建时间删除文件 文件删除了但是空间并未真正释放出来

二、进入glusterfs 节点的文件目录 进入 .glusterfs文件夹下 批量删除文件大小大于10k 且无指向的硬链接 -links 1 -size +10k

第二步执行完毕后空间才会真正的释放。碰见这种坑的可以 将这两步定时任务化 定时清理。

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值