主机参考:VPS测评参考推荐/专注分享VPS服务器优惠信息!若您是商家可以在本站进行投稿,查看详情!此外我们还提供软文收录、PayPal代付、广告赞助等服务,查看详情! |
我们发布的部分优惠活动文章可能存在时效性,购买时建议在本站搜索商家名称可查看相关文章充分了解该商家!若非中文页面可使用Edge浏览器同步翻译!PayPal代付/收录合作 |
Hadoop的纱线(还有另一个资源谈判者)是Hadoop生态系统的关键组成部分,主要负责资源管理和工作计划。 以下是线程的主要角色。
全球资源管理器:负责整个集群的资源分配和调度。 它从应用程序接收资源请求,并根据可用资源分配它们。 NodeManager:在群集中的每个节点上运行,在节点上监视资源使用情况,并向ResourceMemanager报告资源可用性。 他还负责启动和监视容器,这是一个用于运行应用程序的孤立环境。 应用程序管理器(ApplicationMaster):每个应用程序都有其自己的应用程序主体,并负责协调资源请求,任务调度和应用程序中的执行。 它与ResourceManager通信以检索资源并与NodeManager合作以监视任务进度和状态。 容器:用于托管应用程序任务的虚拟化执行环境。 每个应用程序的任务都在提供隔离和资源约束的容器中执行。 支持多个计算模式
纱线体系结构允许多个应用程序共享集群资源,提供更灵活的资源管理策略,并支持多种类型的计算模式,例如批处理处理,交互式查询和流处理。
提高效率和可扩展性
纱的设计目标是提供一个可扩展的,高度可用的资源管理平台,以支持不同类型的分布式计算工作负载。 通过将资源管理和作业计划功能与MapReduce分开,YARN允许Hadoop更好地支持广泛的计算模式和应用程序。 。
通常,纱线在Hadoop中起重要作用。这不仅提高了资源利用率和作业计划效率,而且还为Hadoop生态系统中的其他工具和服务提供了强有力的支持,从而使整个系统更加灵活,高效和可扩展。
这几篇文章你可能也喜欢:
- Linux流程安全性:如何防止恶意过程攻击(Linux Defense)
- 叉系统呼叫分析(成功的叉电话后返回)
- Hadoop如何支持实时数据处理(Hadoop查询数据实时)
- Hadoop文件系统的特征是什么(Hadoop的文件系统的特征和功能是什么?)
- 如何利用Linux利用
本文由主机参考刊发,转载请注明:Hadoop的纱线(HDFS和Hadoop中的纱线)的功能是什么? https://zhujicankao.com/148230.html
评论前必须登录!
注册