当前位置: 首页 > news >正文

1 Hadoop入门

1.Hadoop是什么?

(1)Hadoop是一个由Apache基金会所开发的分布式系统基础架构。
(2)主要解决,海量数据的存储和海量数据的分析计算问题。
(3)广义上来说,Hadoop通常是指一个更广泛的概念——Hadoop生态圈

2.Hadoop的优势

在这里插入图片描述
在这里插入图片描述

3 Hadoop组成

在这里插入图片描述

4 HDFS概述

在这里插入图片描述

5 YARN架构概述

Yet Another Resource Negotiator 简称 YARN ,另一种资源协调者,是 Hadoop 的资源管理器。

yarn主要管理的是整个集群的内存和cpu
在这里插入图片描述
ApplicationManager运行在Container(容器)上,容器是一种虚拟化的技术,类似阿里云的容器虚拟技术,不会是真正的无数台服务器.

6 MapReduce架构概述

负责hadoop中的计算部分
在这里插入图片描述

7 HDFS、YARN、MapReduce 三者关系

在这里插入图片描述

http://www.lryc.cn/news/144410.html

相关文章:

  • 骨传导耳机哪款比较好,市面上最好的骨传导耳机分享
  • centos7安装docker-compose—及常见错误排解
  • Stable Diffusion 文生图技术原理
  • Jumpserver堡垒机管理(安装和相关操作)-------从小白到大神之路之学习运维第89天
  • 伦敦金走势多变怎么办
  • MybatisPlus-插件篇
  • 数学建模:熵权法
  • 软件测试实训系统建设方案
  • 部署 ssm 项目到云服务器上(购买云服务器 + 操作远程云服务器 + 服务器中的环境搭建 + 部署项目到服务器)
  • python爬虫-使用selenium自动登录微博
  • Python 面试:可变类型和不可变类型作为函数参数,关键字参数
  • Web3.0时代什么时候到来,Web3.0有什么机会?
  • vue心得
  • JavaScript—数据类型、对象与构造方法
  • 自定义node-red节点中,如何编写节点的配置信息弹窗
  • 数据之美:探索数据可视化设计的奇妙世界
  • docker初始化
  • 【C语言】结构体变量引用的一个例子
  • 美团笔试题之合并 K 个升序链表
  • C语言(第三十一天)
  • 【C/C++】虚析构 | 抽象类
  • MySQL 的隐式转换导致诡异现象的案例一则
  • 【考研数学】概率论与数理统计 —— 第二章 | 一维随机变量及其分布(2,常见随机变量及其分布 | 随机变量函数的分布)
  • 【2023中国算力大会】《中国综合算力指数(2023年)》出炉,宁夏“资源环境”位列全国第1,“算力”跃入Top10
  • 自动设置服务器全教程
  • Mysql--技术文档--B树-数据结构的认知
  • go gin 自定义验证
  • 掉了无数头发成地中海后,我整理出了这套40+的大屏模板,快收藏!
  • 【从零开始学习JAVA | 第四十六篇】处理请求参数
  • k8s的交付与部署案例操作