hadoop调整自动清除回收站

linux系统最大的不便之处就是没有回收站,使用rm -rf容易引发误删,不可找回。在hadoop或者hdfs里面,trash数据误删后,还可以找回来。
hadoop里的trash选择默认是关闭的,如果要生效需提前把trash选项打开。相关配置在hadoop里面etc/hadoop/core-site.xml。

<property>
	<name>fs.trash.interval</name>
	<value>2880</value>
</property>
<property>
        <name>fs.trash.checkpoint.interval</name>
        <value>60</value>
</property>

fs.trash.interval是回收周期,文件被移动到trash里面,不会马上删掉数。等到回收周期到了,hdfs才会将数据真正删除。默认的单位是分钟。
fs.trash.checkpoint.interval是垃圾回收的检查间隔,应该是小于或者等于fs.trash.interval。
恢复数据命令:
删除数据:

hadoop fs -rm -r /tmp/data/test
hadoop fs -ls /user/xxx/.Trash/Current/tmp/test

可以数据并没有真正删掉。

hadoop fs -mv /user/xxx/.Trash/Current/tmp/data/test /tmp/data/test

数据恢复了。

发布了35 篇原创文章 · 获赞 4 · 访问量 2090

猜你喜欢

转载自blog.csdn.net/jiedaodezhuti/article/details/105251497