您的位置:首页 > 运维架构 > 网站架构

Hadoop系列-YARN RM HA 高可用集群

2016-10-23 20:43 531 查看

ResourceManager HA集群

修改 yarn-site.xml



 


yarn-site.xml分发到其他节点

scpyarn-site.xml
hadoop@hadoop-cluster-02:/opt/app/hadoop-2.5.0

/etc/hadoop

scpyarn-site.xml
hadoop@hadoop-cluster-03:/opt/app/hadoop-2.5.0

/etc/hadoop

自动故障转移

RescouceManager有内嵌的一个基于ZooKeeper的ActiveStandbyElector去决定哪个RM应该是Active,当ActiveRM宕机,另外一个RM将会自动备选举为Active,然后接手工作,并且这里不像HDFSHA,我们需要启动一个ZKFC的守护进程,因为内嵌的

ActiveStandbyElector已经替代ZKFC,进行失败检测,和选举。

测试

我们发现:如果谁是ActiveRM,那么你访问另外的RM web http地址,那么会重定向到当前ActiveRM web http地址。

如果,当前ActiveRM 进程杀掉的话,StandbyRM不重定向,说明它生效了。



访问http://hadoop-cluster-03:8088/

内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: