Hadoop之回收站
一、回收站簡(jiǎn)介:
??? 在HDFS里,刪除文件時(shí),不會(huì)真正的刪除,其實(shí)是放入回收站/trash,回收站里的文件可以快速恢復(fù)。
??? 可以設(shè)置一個(gè)時(shí)間閥值,當(dāng)回收站里文件的存放時(shí)間超過(guò)這個(gè)閥值或是回收站被清空時(shí),文件才會(huì)被徹底刪除,并且釋放占用的數(shù)據(jù)塊。
二、實(shí)例:
??? Hadoop的回收站trash功能默認(rèn)是關(guān)閉的,所以需要在core-site.xml中手動(dòng)開(kāi)啟。
1、修改core-site.xml,增加:
<property> <name>fs.trash.interval</name> <value>1440</value> <description>Number of minutes between trash checkpoints. If zero, the trash feature is disabled. </description> </property>默認(rèn)是0,單位是分鐘,這里設(shè)置為1天。
刪除數(shù)據(jù)rm后,會(huì)將數(shù)據(jù)move到當(dāng)前文件夾下的.Trash目錄。
2、測(cè)試
1)、新建目錄input
hadoop/bin/hadoop fs -mkdir input2)、上傳文件
root@master:/data/soft# hadoop/bin/hadoop fs -copyFromLocal /data/soft/file0* input3)、刪除目錄input
[root@master data]# hadoop fs -rmr input Moved to trash: hdfs://master:9000/user/root/input4)、查看當(dāng)前目錄
[root@master data]# hadoop fs -ls Found 2 items drwxr-xr-x - root supergroup 0 2011-02-12 22:17 /user/root/.Trash發(fā)現(xiàn)input刪除了,多了一個(gè)目錄.Trash
5)、恢復(fù)剛剛刪除的目錄
6)、查看恢復(fù)的數(shù)據(jù)
[root@master data]# hadoop fs -ls input Found 2 items -rw-r--r-- 3 root supergroup 22 2011-02-12 17:40 /user/root/input/file01 -rw-r--r-- 3 root supergroup 28 2011-02-12 17:40 /user/root/input/file027)、刪除.Trash目錄(清理垃圾)
[root@master data]# hadoop fs -rmr .Trash Deleted hdfs://master:9000/user/root/.Trash?
轉(zhuǎn)載于:https://www.cnblogs.com/Richardzhu/p/3652228.html
總結(jié)
以上是生活随笔為你收集整理的Hadoop之回收站的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: Java 几种showMessageDi
- 下一篇: Sublime Text 2