前置

YARN可以通过相关配置支持ResourceManager重启过程中,不影响正在运行的作业,即重启后,作业还能正常继续运行直到结束。

参见详细文档 ResourceManagerRestart

涉及配置如下:

Untitled

备注:

Untitled

使用 HDFS 保存 RM 状态信息

修改 yarn-site.xml

Untitled

未开启Recovery

若集群**未开启**Recovery功能,则重启ResourceManager的过程中:

重启后UI页面作业信息消失