使用hdfs回收站防止意外数据删除_第1页
使用hdfs回收站防止意外数据删除_第2页
使用hdfs回收站防止意外数据删除_第3页
使用hdfs回收站防止意外数据删除_第4页
使用hdfs回收站防止意外数据删除_第5页
已阅读5页，还剩7页未读， 继续免费阅读

下载本文档

版权说明：本文档由用户提供并上传，收益归属内容提供方，若内容存在侵权，请进行举报或认领

文档简介

主讲：朱佳目录0102配置使用hdfs回收站绕过回收站配置使用hdfs回收站1配置使用hdfs回收站当从HDFS删除文件时,将释放与该文件相关联的块。但是,这种释放不会立即发生，因为HDFS不会立即移除删除的文件。相反，它重命名这些文件，并将它们放在trash目录中。如果将保留期配置为6个小时，则删除的文件将在trash目录中保留6个小时，之后NameNode从其命名空间中删除该文件。可以将删除的文件恢复到其原始或不同的目录，只要它仍然在回收站目录中。因此，回收站是一种安全机制，用于避免意外删除文件。正如刚才提到的，可以配置被删除的文件在trash目录中保留的时间。配置使用hdfs回收站HDFS回收站是一个用户级功能，这意味着只有使用HDFSdfs文件系统命令删除的文件才会存储在回收站中。如果以编程方式删除HDFS文件，则它会立即被永久删除！如果你想通过程序防止意外或错误的文件删除，则可以这样做：创建一个trash实例，并使用要删除的文件的路径调用moveToTrash()。如果未启用回收站，则moveToTrash方法返回false。配置使用hdfs回收站HDFS回收站可防止意外删除文件和目录。可以通过在core-site.xml文件中设置参数erval（以分钟为单位）来启用回收站功能，如下所示：<property><name>erval</name><value>1440</value></property>配置使用hdfs回收站在默认情况下，回收站间隔为零（erval=O)，因此文件将立即被永久删除，而不会被存储在trash目录中。可以将erval参数的值设置为1440分钟，以确保删除的文件在HDFS中保留一天。除了erval参数之外，在配置集群时，也可以设置erval参数。这个参数指定NameNode检查回收站目录的频率。配置使用hdfs回收站Trashcheckpointing是一个进程，用于周期性地对当前子目录用时间戳重命名。如果将此参数设置为一小时，则NameNode每小时检查一次trash目录，并删除保留时间超过1440分钟的文件，这是我们在此示例中配置的回收间隔。注意，仅在NameNode上设置erval参数是不够的。还必须在可从其访问HDFS的所有客户端节点上设置它。否则，当客户端删除文件时，可能会看到文件被立即删除!回收间隔从删除文件被移动到回收站的时间开始计算。绕过回收站2绕过回收站有时，需要绕过回收站设施，因为有时在删除一些数据时，我们希望一劳永逸。如果启用了回收站，已删除的文件将继续占用与该文件关联的块，并且无法释放空间。如果想要执行常规删除以节省HDFS空间，请在删除文件时指定-skipTrash选项，如下所示:$hdfsdfs-rm-r-skipTrash/user/test绕过回收站如果执行以下命令，不仅删除存储在trash目录中的每个文件，而且还删除trash目录本身!$hdfsdfs-rm-r-skipTras

人人文库> 全部分类> 教育资料 > 辅导培训

温馨提示

  • 1. 本站所有资源如无特殊说明，都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等，如果需要附件，请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸，网页内容里面会有图纸预览，若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对用户上传分享的文档内容本身不做任何修改或编辑，并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容，请与我们联系，我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

最新文档

评论

0/150

提交评论