当前位置:网站首页 > R语言数据分析 > 正文

yarn 进程(yarn进程包括)



Hadoop三大件:HDFS、MapReduce、Yarn

Yarn其实就是一个类似于操作系统一样的东西。

Yarn是MapReduce运行的环境,Yarn可以管理程序运行所需要的东西(内存,CPU,带宽等资源)

Yarn诞生于Hadoop,但是现在已经脱离了Hadoop,变成了一个独立的软件,系统。

我们的Yarn,其实有两大部分组成:

1、ResourceManager (BOSS):  1个
 他用来管理整个的Yarn平台,里面有一个资源调度器。
2、NodeManager (各个机器上的主管)  多个
   听从我们的ResouceManager的调遣。是每一台电脑的管家。
3、Container(容器)
   每一个NodeManager中,有一个或者多个这样的容器。是包含了一些资源的封装(CPU,内存,硬盘等),类似于我们熟悉的虚拟机。
4、AppMaster (项目经理)
   每一个MapReduce任务启动提交后,会有一个对应的AppMaster。这个主要作用是负责整个job任务的运行。

到此这篇yarn 进程(yarn进程包括)的文章就介绍到这了,更多相关内容请继续浏览下面的相关 推荐文章,希望大家都能在编程的领域有一番成就!

版权声明


相关文章:

  • resnet50和resnet18(resnet50和resnet18速度)2025-04-11 16:18:06
  • redhat操作系统(redhat操作系统安装步骤)2025-04-11 16:18:06
  • expatrio客服(expatrio客服邮箱)2025-04-11 16:18:06
  • qt字符串转变量名(qt 字符串转char)2025-04-11 16:18:06
  • 华为ensp模拟器怎么使用(ensp模拟器hybrid)2025-04-11 16:18:06
  • swagger2关闭配置(swagger怎么配置)2025-04-11 16:18:06
  • Oracle查看锁表记录(oracle如何看锁表)2025-04-11 16:18:06
  • revs怎么读(revia怎么读)2025-04-11 16:18:06
  • uchar是什么意思(uchar j什么意思)2025-04-11 16:18:06
  • srore的名词(irregular名词)2025-04-11 16:18:06
  • 全屏图片