Hadoop-YARN介绍_hadoop yarn

作者：神奇cpp | 2024-07-19 16:06:31

踩

hadoop yarn

YARN介绍

YARN的组件

程序提交到YARN的交互过程

资源调度

YARN介绍

YARN（Yet Another Resource Negotiator，另一种资源协调者），是通用资源管理器和调度平台，可为上层应用提供统一的资源管理和调度。

可以把YARN理解为相当于一个分布式的操作系统平台，MapReduce等计算程序相当于运行在操作系统之上的应用程序，YARN为这些应用程序分配资源。

资源管理系统：管理集群的cpu，内存，YARN没有管理磁盘，因为磁盘由HDFS管理。

调度平台：为来申请资源的应用合理分配资源

通用：支持各种计算框架，YARN不关心你干是干什么的，只关心你要的资源。

从图中可以看出，YARN不仅支持MapReduce，还支持其他很多框架，MapReduce已经淘汰了，但是Hadoop依然屹立不倒，正是因为YARN，YARN能支持各种框架来读取HDFS上的数据。

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/神奇cpp/article/detail/852365