一、回收站簡介:
在HDFS里,刪除文件時,不會真正的刪除,其實是放入回收站/trash,回收站里的文件可以快速恢復(fù)。
可以設(shè)置一個時間閥值,當(dāng)回收站里文件的存放時間超過這個閥值或是回收站被清空時,文件才會被徹底刪除,并且釋放占用的數(shù)據(jù)塊。
二、實例:
Hadoop的回收站trash功能默認是關(guān)閉的,所以需要在core-site.xml中手動開啟。
1、修改core-site.xml,增加:
<property> <name>fs.trash.interval</name> <value>1440</value> <description>Number of minutes between trash checkpoints. If zero, the trash feature is disabled. </description> </property>
默認是0,單位是分鐘,這里設(shè)置為1天。
刪除數(shù)據(jù)rm后,會將數(shù)據(jù)move到當(dāng)前文件夾下的.Trash目錄。
2、測試
1)、新建目錄input
hadoop/bin/hadoop fs -mkdir input
2)、上傳文件
root@master:/data/soft# hadoop/bin/hadoop fs -copyFromLocal /data/soft/file0* input
3)、刪除目錄input
[root@master data]# hadoop fs -rmr input Moved to trash: hdfs://master:9000/user/root/input
4)、查看當(dāng)前目錄
[root@master data]# hadoop fs -ls Found 2 items drwxr-xr-x - root supergroup 0 2011-02-12 22:17 /user/root/.Trash
發(fā)現(xiàn)input刪除了,多了一個目錄.Trash
5)、恢復(fù)剛剛刪除的目錄
[root@master data]# hadoop fs -mv /user/root/.Trash/Current/user/root/input /user/root/input
6)、查看恢復(fù)的數(shù)據(jù)
[root@master data]# hadoop fs -ls input Found 2 items -rw-r--r-- 3 root supergroup 22 2011-02-12 17:40 /user/root/input/file01 -rw-r--r-- 3 root supergroup 28 2011-02-12 17:40 /user/root/input/file02
7)、刪除.Trash目錄(清理垃圾)
[root@master data]# hadoop fs -rmr .Trash Deleted hdfs://master:9000/user/root/.Trash
posted on 2017-05-12 11:20
xzc 閱讀(215)
評論(0) 編輯 收藏 所屬分類:
hadoop