INFO-HDFS设置大表跳过回收站

具体说明

部份表过大有几百G,并且拥有三副本,回收站每半小时清理一次时导致namenode卡顿,半点任务运行时长激增。可设置某些大表目录跳过回收站,但恢复数据有一定风险。

使用示例

在easyops上namenode中hdfs-site配置dfs.namenode.recycle.bin.skip.path,参数值为指定目录,多个目录利用逗号分隔,同步配置并重启备节点,备节点退出安全模式后重启主节点。。

INFO-HDFS设置大表跳过回收站 - 图1


作者:楚展航