yarn 进程(yarn进程包括)

yarn 进程(yarn进程包括)Hadoop 三大件 HDFS MapReduce Yarn Yarn 其实就是一个类似于操作系统一样的东西 Yarn 是 MapReduce 运行的环境 Yarn 可以管理程序运行所需要的东西 内存 CPU 带宽等资源 Yarn 诞生于 Hadoop 但是现在已经脱离了 Hadoop

大家好,我是讯享网,很高兴认识大家。



Hadoop三大件:HDFS、MapReduce、Yarn

Yarn其实就是一个类似于操作系统一样的东西。

Yarn是MapReduce运行的环境,Yarn可以管理程序运行所需要的东西(内存,CPU,带宽等资源)


讯享网

Yarn诞生于Hadoop,但是现在已经脱离了Hadoop,变成了一个独立的软件,系统。

我们的Yarn,其实有两大部分组成:

1、ResourceManager (BOSS):  1个
 他用来管理整个的Yarn平台,里面有一个资源调度器。
2、NodeManager (各个机器上的主管)  多个
   听从我们的ResouceManager的调遣。是每一台电脑的管家。
3、Container(容器)
   每一个NodeManager中,有一个或者多个这样的容器。是包含了一些资源的封装(CPU,内存,硬盘等),类似于我们熟悉的虚拟机。
4、AppMaster (项目经理)
   每一个MapReduce任务启动提交后,会有一个对应的AppMaster。这个主要作用是负责整个job任务的运行。

小讯
上一篇 2025-06-05 17:16
下一篇 2025-04-29 09:30

相关推荐

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
如需转载请保留出处:https://51itzy.com/kjqy/152909.html