当前位置: 首页 > news >正文

HDFS- DataNode磁盘扩缩容

HDFS- DataNode磁盘扩缩容

背景:

缩减/增加节点磁盘

方案介绍:

采用hdfs dfsadmin -reconfig 动态刷新配置实现,不停服扩缩容。

注意事项

请在进行缩容之前,务必了解实际的数据量,并确保磁盘有足够的空间来容纳这些数据。还需要考虑未来的使用需求,要预留一定数量的空间,以适应未来的增长。

执行步骤

前置检查:

  1. 确定block副本统计正常,无丢块,无under-replicated 块

后台检查:hdfs dfs fsck /

  1. kde监控页面无严重告警

###所有变更 避开业务高峰期

一、datanode磁盘扩缩容

1、修改配置

例如:/data2/hadoop/hdfs/datanode 目录

2、保存配置

http://www.lryc.cn/news/346397.html

相关文章:

  • 5.10.3 使用 Transformer 进行端到端对象检测(DETR)
  • 前端开发指导
  • 三方库的调用方法
  • 如何使用提示测试为LLMs构建单元测试?
  • 目前市面上堡垒机厂家有哪些?会帮忙部署吗?
  • 【备忘】在使用php-ffmpeg/php-ffmpeg开发时遇到Unable to load FFProbe时如何处理?
  • REFORMER: 更高效的TRANSFORMER模型
  • 视频合并有妙招:视频剪辑一键操作,批量嵌套合并的必学技巧
  • 安装SQL Server详细教程_sql server安装教程
  • Git那些事-如何撤销暂存区的文件
  • 记一次SQL和程序查询结果不一致的问题
  • Python 实战之量化交易
  • 跟我学C++中级篇——封装对象的实践
  • iOS面试题链接汇总
  • TEINet: Towards an Efficient Architecture for Video Recognition 论文阅读
  • Navicat Data Modeler Ess for Mac:强大的数据库建模设计软件
  • NSS刷题
  • CUDA专项
  • C# 判断Access数据库中表是否存在,表中某个字段是否存在
  • 【C++】学习笔记——模板进阶
  • JAVA系列 小白入门参考资料 接口
  • 日报表定时任务优化历程
  • excel表格里,可以把百分号放在数字前面吗?
  • 应用案例 | 商业电气承包商借助Softing NetXpert XG2节省网络验证时间
  • 【JAVA语言-第20话】多线程详细解析(二)——线程安全,非线程安全的集合转换成线程安全
  • 区块链中的加密算法及其作用
  • 微信小程序跳转微信管理平台配置的客服及意见页面
  • 灌溉机器人 状压dp
  • 用于接收参数的几个注解
  • Flask-Login 实现用户认证