hadoop是做什么的 Hadoop是如何诞生的(2)
hadoop是做什么的

(3)资源管理:在前面的内容中,我们可以发现储存处理大数据需要大量内存、网络带宽、CPU等资源的支持。当有多个作业在Hadoop上同时运行,它们都需要硬件资源来成功完成任务,如何去分配管理这些资源。
这些资源管理任务就要用到Hadoop的第三个组件:YARN。YARN由资源管理器、节点管理器、应用管理器和容器组成。资源管理器分配资源,节点管理器处理并监控节点中的资源使用情况。容器是所有物理资源的集合。

假设此时要进行一个任务,那么首先应用管理器要向节点管理器请求容器资源;节点管理器获得资源后,将它们发送给资源管理器。这样YARN在Hadoop中就可以处理作业请求并管理集群资源。

除了上述三个基础组件,它还有各种大数据工具和框架,用于管理、处理和分析数据。此外还有HIVE、PIG、SPARK、FLUME、SCOOP等等不同功能的组件共同致力于大数据管理。
这就是Hadoop,是一个能够让用户轻松架构和使用的分布式计算平台。
以上带来的Hadoop是如何诞生的 及其 hadoop是做什么的的生活小经验,希望能为您在生活中带来帮助!
相关阅读
-
航母数量排行榜全世界 世界上航母最多的国家是哪个
如果想了解航母数量排行榜全世界的话题,具体详情如下: 千呼万唤始出来的福建号航母终于举行了下水仪式,也对应的刷新了全球航母排行,中国航母排名正式跃升至世界第二位,排名算是
-
会变色的动物有哪些 会变色的丽棘蜥是一种什么动物
小编为你讲解会变色的丽棘蜥是一种什么动物和会变色的动物有哪些的介绍,接下来常识社网小编就来介绍。 丽棘蜥,俗称:七步跳。为鬣蜥科棘蜥属的一种蜥蜴。主要生活在海拔400-1200米山
-
世界上什么海最大 世界上面积最大的海洋排行榜前十名
你是不是想知道世界上面积最大的海洋排行榜前十名和世界上什么海最大方面的介绍,接下来一起来看看吧。 10 鄂霍次克海 Sea of Okhotsk 鄂霍次克海(Sea of Okhotsk)位于西北太平洋,堪察加半岛
-
玉溪有几个县几个区 云南省玉溪市下辖行政区划分介绍
今天为大家介绍云南省玉溪市下辖行政区划分介绍和玉溪有几个县几个区的知识内容,一起来了解了解吧。 玉溪市,云南省辖地级市,位于云南省中部。 玉溪市北接省会昆明市,西南连普洱市


