本文介绍了在Linux环境下，如何使用脚本配合awk命令删除HDFS上五天以前的过期数据，以实现自动清理功能。
业务背景
约定五天前的HDFS数据为过期版本数据，写一个脚本自动删除过期版本数据
$ hadoop fs -ls /user/pms/workspace/ouyangyewei/data
Found 9 items
drwxr-xr-x - pms pms 0 2015-08-11 17:03 /user/pms/workspace/ouyangyewei/data/2015-08-01
drwxr-xr-x - pms pms 0 2015-08-11 17:03 /user/pms/workspace/ouyangyewei/data/2015-08-02
drwxr-xr-x - pms pms 0 2015-08-11 17:03
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
