INFO-模板

适用模块
数据资产、hdfs
具体说明
数据资产历史数据过大占用hdfs 空间,手动清理示例
使用示例
一、删除hdfs上历史资产数据
1、hdfs 做认证
INFO-数据资产历史数据清理 - 图1
2、查看确认hdfs目录大小并确认占用过大的文件
/user/mammut_service/fsimage/clstname=easyops-cluster
/user/mammut_service/meta-worker/
INFO-数据资产历史数据清理 - 图2
INFO-数据资产历史数据清理 - 图3
3、删除历史数据(批量删除时可用匹配) ./current/bin/hdfs dfs -rm -r /user/mammut_service/fsimage/clstname=easyops-cluster/prtdate=2024-04
./current/bin/hdfs dfs -rm -r /user/mammut_service/meta-worker/prtdate=2024-05-0*
INFO-数据资产历史数据清理 - 图4
二、清理回收站刚才删除的数据
注意下面目录半小时滚动一次,先确认之前清理的数据进了那个目录下 ./current/bin/hdfs dfs -rm -r -skipTrash /user/hdfs/.Trash/Current/user/mammut_service
INFO-数据资产历史数据清理 - 图5

作者:林帅