当前位置: 首页 > news >正文

ambari 开启hdfs回收站机制

        hdfs回收站类似于我们常用的windows中的回收站,被删除的文件会被暂时存储于此,和回收站相关的参数有两个:

fs.trash.interval:默认值为0 代表禁用回收站,其他值为回收站保存文件时间,单位为分钟

fs.trash.checkpoint.interval:回收站数据判断是否需要清理的检查周期,单位为分钟,默认为 0 时等于fs.trash.interval的值,要求值不大于fs.trash.interval

        ambari中hdfs上的配置的fs.trash.interval在“Advanced core-site”一栏中

fs.trash.checkpoint.interval在已有的配置项中没有找到,只能通过add property添加

 

通过以上参数配置即完成了hdfs 回收站的开启。 

现在通过HDFS Web试用一下,此时可能出现权限问题,可以参照此篇博客配置HDFS Web UI登录静态用户_hdfs ui_@TangXin的博客-CSDN博客解决,配置hadoop.http.staticuser.user参数配置web ui 登录时的静态用户为hdfs:

上传一个文件:

 点击删除后,在/user目录下查找被删除的head.jpg文件,但是并没有找到

难道通过web ui删除的文件不会进回收站?切换使用命令行上传并删除文件, 

 果然命令行删除的文件成功进入回收站,看来web ui界面删除的文件是直接删除了。

使用mv命令回复数据

hdfs  dfs  -mv  trashFileDir   hdfsdir

trashFileDir :回收站的文件路径
hdfsdir :将文件移动到先前被删除的hdfs路径下;

手动清空回收站命令

hdfs dfs -expunge

希望直接把文件删除,不需要再经过Trash回收站了

可以在执行删除操作的时候添加一个参数:-skipTrash

 

http://www.lryc.cn/news/254168.html

相关文章:

  • 服务器数据恢复—服务器重装系统导致逻辑卷发生改变的数据恢复案例
  • 软件工程之架构设计
  • oracle java.sql.SQLException: Invalid column type: 1111
  • Mac 浏览器下载的文件名总是「乱码」
  • Redis Reactor事件驱动模型源码
  • cv2.error: OpenCV(4.7.0)
  • 10.vue3项目(十):spu管理页面的sku的新增和修改
  • Java LeetCode篇-深入了解二叉树经典解法(三种方式实现:获取二叉树的最大深度)
  • Image Segmentation Using Deep Learning: A Survey
  • 可视化开源编辑器Swagger Editor本地部署并实现远程访问管理编辑文档
  • Java TCP协议实现一对一聊天与UDP协议实现群聊案例
  • 【从0配置JAVA项目相关环境1】jdk + VSCode运行java + mysql + Navicat + 数据库本地化 + 启动java项目
  • 人工智能_机器学习053_支持向量机SVM目标函数推导_SVM条件_公式推导过程---人工智能工作笔记0093
  • 二叉树的前、中和后序遍历的递归与迭代实现
  • 人体姿态估计算法
  • docker部署jupyter
  • 音视频的功耗优化
  • Python实现FA萤火虫优化算法优化XGBoost回归模型(XGBRegressor算法)项目实战
  • SCAUoj综合性实验
  • 智加科技获全国首张重卡无人驾驶开放道路测试牌照
  • LLM大语言模型(一):ChatGLM3-6B本地部署
  • chatgpt prompt提示词
  • 【PyTorch】数据集
  • oops-framework框架 之 本地存储(五)
  • 编程常见的问题
  • 针对Arrays.asList的坑,可以有哪些处理措施
  • SE考研真题总结(一)
  • Xshell远程登录AWS EC2 Linux实例
  • Elasticsearch:对时间序列数据流进行降采样(downsampling)
  • python自动化测试框架:unittest测试用例编写及执行