YARN架构简记

栏目: 服务器 · 发布时间: 6年前

内容简介:HA:RM启动时会向zk的/mrstore路径下写入lock文件,写入成功的则为active RM,否则为standby RM。启动后,RM会将job信息写入/mrstore,RM进程中的ZKFC线程会监控/mrstore中的lock文件,若不存在则RM为active,存在则为standby,切换后可从/mrstore读取job信息。运行:Client提交job,会访问RM,若访问到standby RM则重新访问active RM。RM根据job上下文以及从NM收集到的状态信息分配资源并调度,启动一个con

YARN架构简记

HA:RM启动时会向zk的/mrstore路径下写入lock文件,写入成功的则为active RM,否则为standby RM。启动后,RM会将job信息写入/mrstore,RM进程中的ZKFC线程会监控/mrstore中的lock文件,若不存在则RM为active,存在则为standby,切换后可从/mrstore读取job信息。

运行:Client提交job,会访问RM,若访问到standby RM则重新访问active RM。RM根据job上下文以及从NM收集到的状态信息分配资源并调度,启动一个container用来运行AM。NM负责启动container,监控所在节点的资源使用情况,并通过心跳机制报告给RM。job的task会在container中运行。

RM,NM相当于写字楼的管理者,RM总管,NM区域管理,它们提供container(办公室);

AM相当于项目经理,向写字楼管理者申请办公室,在它们提供的container上执行task,完成客户提交的job。


以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

网络多人游戏架构与编程

网络多人游戏架构与编程

格雷泽 (Joshua Glazer)、马达夫 (Sanjay Madhav) / 王晓慧、张国鑫 / 人民邮电出版社 / 2017-10-1 / CNY 109.00

本书是一本深入探讨关于网络多人游戏编程的图书。 全书分为13章,从网络游戏的基本概念、互联网、伯克利套接字、对象序列化、对象复制、网络拓扑和游戏案例、延迟、抖动和可靠性、改进的延迟处理、可扩展性、安全性、真实世界的引擎、玩家服务、云托管专用服务器等方面深入介绍了网络多人游戏开发的知识,既全面又详尽地剖析了众多核心概念。 本书的多数示例基于C++编写,适合对C++有一定了解的读者阅读。本......一起来看看 《网络多人游戏架构与编程》 这本书的介绍吧!

HTML 编码/解码
HTML 编码/解码

HTML 编码/解码

URL 编码/解码
URL 编码/解码

URL 编码/解码

HEX HSV 转换工具
HEX HSV 转换工具

HEX HSV 互换工具