1.分布式的资源调度-yarn(hadoop的一个组件)
资源服务器硬件资源,如:CPU,内存,硬盘,网络等
资源调度:管控服务器硬件资源,提供更好的利用率
分布式资源调度:管控整个分布式服务器集群的全部资源,整合进行统一调度
总结就是使用yarn配合MapReduce,提高集群资源的利用率
2.yarn如何工作:
程序向YARN申请所需资源, YARN为程序分配所需资源供程序使用,明显的担起了资源调度的职责
3.yarn架构:
主从架构:ResourceManager(主)与nodemanager(从)
ResourceManager: 整个集群的资源调度者,负责协调调度各个程序所需的资源。
nodemanager: 单个服务器的资源调度者,负责调度单个服务器上的资源提供给应用程序使用。
主节点:jps
从节点:jps
4.调度原理
因篇幅问题不能全部显示,请点此查看更多更全内容
Copyright © 2019- huatuoyibo.net 版权所有 湘ICP备2023021910号-2
违法及侵权请联系:TEL:199 1889 7713 E-MAIL:2724546146@qq.com
本站由北京市万商天勤律师事务所王兴未律师提供法律服务