INFO-数据资产历史数据清理
更新时间: 2024-06-12 07:11:06
阅读 498
INFO-模板
适用模块
数据资产、hdfs具体说明
数据资产历史数据过大占用hdfs 空间,手动清理示例使用示例
一、删除hdfs上历史资产数据1、hdfs 做认证
![INFO-数据资产历史数据清理 - 图1](/documents/static/images/loading.gif)
2、查看确认hdfs目录大小并确认占用过大的文件
/user/mammut_service/fsimage/clstname=easyops-cluster
/user/mammut_service/meta-worker/
![INFO-数据资产历史数据清理 - 图2](/documents/static/images/loading.gif)
![INFO-数据资产历史数据清理 - 图3](/documents/static/images/loading.gif)
3、删除历史数据(批量删除时可用匹配) ./current/bin/hdfs dfs -rm -r /user/mammut_service/fsimage/clstname=easyops-cluster/prtdate=2024-04
./current/bin/hdfs dfs -rm -r /user/mammut_service/meta-worker/prtdate=2024-05-0*
![INFO-数据资产历史数据清理 - 图4](/documents/static/images/loading.gif)
二、清理回收站刚才删除的数据
注意下面目录半小时滚动一次,先确认之前清理的数据进了那个目录下 ./current/bin/hdfs dfs -rm -r -skipTrash /user/hdfs/.Trash/Current/user/mammut_service
![INFO-数据资产历史数据清理 - 图5](/documents/static/images/loading.gif)
作者:林帅
文档反馈
以上内容对您是否有帮助?